- 博客(50)
- 资源 (1)
- 收藏
- 关注
原创 昇思25天学习打卡营第25天|基于 MindSpore 实现 BERT 对话情绪识别
本章使用bert完成了智能对话场景下的情感识别,情感包括正面、负面、中性,可以帮助改善产品体验、或提升客服质量等。直接加载bert的预训练模型,给出分类数,再定义优化器、评价指标,构建训练器即可。可以直接使用bert-chinese的分词器。
2024-07-29 11:24:27
565
原创 昇思25天学习打卡营第24天|基于MindSpore的红酒分类实验
本章使用KNN完成红酒分类任务,影响knn效果的主要是k值选择,距离算法与分类决策规则(多数投票或带权重)。最终得到十三个属性和红酒分类效果有关,即可有效完成品类预测。但由于KNN是非参数化的机器学习算法,没有显式的模型参数,因此没办法直接通过KNN确认每一个特征与因变量的具体关系或相关性。
2024-07-26 15:12:14
1075
原创 昇思25天学习打卡营第23天|Diffusion扩散模型
return resreturn resreturn resreturn valreturn d1# 定义上下采样操作的别名本章基于denoising diffusion probabilistic model (DDPM)完成了构建模型的搭建。其中正向过程用于加噪,逆向过程用于降噪,他们都基于高斯分布。因此神经网络就是学习条件概率分布的均值和方差。这里使用Unet构建模型,它在编解码器中加入了残差连接,改善了梯度流。构建块包括位置嵌入、ConvNeXT、Attention和组归一化。
2024-07-25 21:03:37
949
原创 昇思25天学习打卡营第22天|CycleGAN图像风格迁移互换
本章依然实现了一个基于GAN的模型,使用CycleGAN完成了风格迁移任务。CycleGAN使用镜像的结构,利用循环一致性损失函数来计算原图片和生成的伪图之间的损失。
2024-07-25 10:41:19
1057
原创 昇思25天学习打卡营第21天|Pix2Pix实现图像转换
本章使用Pix2Pix完成了图像翻译任务。它基于cGAN,与传统GAN的不同是增加了条件信息。而在Pix2Pix中,指导信息为图片。而生成器和判别器分别采用U-Net和patchGan。
2024-07-23 20:24:19
1093
原创 昇思25天学习打卡营第20天|DCGAN生成动漫头像
本章使用DCGAN模型完成了漫画图像的生成,其中DCGAN与传统GAN的区别是反卷积层和卷积层在判别器上的使用。
2024-07-22 14:23:11
453
原创 昇思25天学习打卡营第19天|GAN图像生成
使用二进制交叉熵损失函数BCELoss,使用Adam优化器lr = 0.0002 # 学习率# 损失函数# 优化器本章使用GAN完成了手写字体生成任务。
2024-07-19 10:43:44
599
原创 昇思25天学习打卡营第16天|Vision Transformer图像分类
本章使用ImageNet的数据集上完成了ViT模型的构建和推理,学习了ViT网络的构成。
2024-07-16 17:16:16
1016
原创 昇思25天学习打卡营第13天|基于MobileNetv2的垃圾分类
本章完整地实现了MobileNetv2网络,并完成了模型的训练、保存、推理、导出。
2024-07-10 21:16:46
835
原创 昇思25天学习打卡营第12天|基于MindSpore的GPT2文本摘要
本章介绍了使用GPT2进行文本总结任务的基本流程,包括数据导入、数据预处理、模型训练、和模型推理。
2024-07-09 15:17:06
572
原创 昇思25天学习打卡营第11天|文本解码原理-以MindNLP为例
本篇介绍了在自回归语言模型下的几类文本生成算法,包括最简单的贪心法、有多种变体的sample、以及beam search束搜索。
2024-07-08 20:47:13
678
原创 昇思25天学习打卡营第9天|保存与加载
本节介绍了两个场景下保存和加载模型,分别是对模型参数的,和对中间结果的。对于模型参数,后续创建一样的模型,再填充参数。对于IR,保存的是中间结果。因此存放时需先输入,再保存。后续可以将模型直接用于推理。
2024-07-04 10:13:40
380
原创 昇思25天学习打卡营第8天|模型训练
定义一个6层的神经网络,包括1个展平层,三个全连接层, 两个relu激活层。nn.ReLU(),nn.ReLU(),在模型训练中可以自己设置的控制模型训练中的参数。模型参数是在训练过程中通过优化算法自己学习到的,而超参数是手动或通过一些方式在训练前设定的,在训练过程中保持不变。深度学习中大多拆用批量随机梯度下降算法进行优化。wt1wt−η1n∑x∈B∇lxwtwt1wt−ηn1x∈B∑∇lxwt其中,nnn。
2024-07-03 15:56:08
856
原创 昇思25天学习打卡营第7天|网络构建
继承nn.Cell类nn.ReLU(),nn.ReLU(),# 构建神经网络# 实例化Network这个网络的结构是Flatten层:将输入的二维图像(28x28)展开成一维向量(784)。这一层是必要的,因为全连接层(Dense层)只能接受一维的输入。Dense-ReLU 序列:第一层 Dense(28*28, 512),将长度784的输入映射到512。正态分布初始化的权重和零初始化的偏置一层 ReLU激活函数,添加非线性,使网络能够学习到复杂的模式。
2024-07-02 11:14:31
978
原创 昇思25天学习打卡营第6天|函数式自动微分
本章使用了两种方式实现了自动微分,也就是梯度计算。一种是手动构建模型,一种使用nn.Cell搭建的神经网络。此外,本节也复习了一些深度学习的基础知识。
2024-07-01 15:31:08
683
原创 昇思25天学习打卡营第4天|数据集Dataset
对于没有预加载和不能使用api加载的数据集,可构造自定义数据加载类或自定义数据集生成函数的方式来生成数据集。再通过GeneratorDataset接口实现自定义方式的数据集加载。这个接口支持通过以下三种方式构造自定义数据集。这节学了一些dataset的加载、操作、以及自定义数据集。
2024-06-27 21:51:19
463
原创 昇思25天学习打卡营第2天|快速入门
今天学习了搭建一个简单深度学习网络的基本步骤,由环境搭建、数据集处理、模型搭建、模型训练到模型加载。串通了整个模型在MindSpore的运作逻辑。
2024-06-25 18:52:56
424
原创 一文解决Word中公式插入问题(全免费/latex公式输入/texsWord)
分文不花,搞定你的word公式输入/texsWord完全使用指南
2024-03-14 17:41:57
13411
5
原创 【新手向】从零开始环境搭建,输出你的第一个R markdown文档
实际上,html的兼容性很好,但是html毕竟不是正式的格式,我一般都会输出成pdf。进入这个文件夹下,创建一个txt文件,写入.libPaths(“D:/sw/R”),保存后命名为".Rprofile"ps2. 值得一提的是,现在我们安装的rticles,还有刚刚的tinytex都是谢益辉大佬开发的。咱需要装rmarkdown的包,上面的方式是用命令行装,这次换种方式。打开Rstudio,会神奇的发现它已经自己找到咱们安装好的版本了。在电脑上装支持tex的包,这里我选择的是tinyTex,小又轻。
2024-02-21 14:47:34
1209
1
原创 浅谈python中@装饰器 - 附例子(含类装饰器与函数装饰器)
所以装饰器是什么,其实只是给当前的模块增加的新功能。装饰器可以是类,也可以是函数。它不会改变原来的函数本身,符合设计方法的开闭原则。
2023-01-29 14:15:03
592
1
原创 从0到0.1学习 lambda表达式(Java版)
lambda表达是实质上就是一个匿名函数那什么是匿名函数呢?匿名函数就是没有名字的函数,可以直接嵌入在方法内。里面只包括 函数参数(parameter)+表达式(expression) 或者 函数参数(parameter)+陈述(statements)PS: 表达式产生值 eg. a+b;2。这两个都属于表达式。陈述重在操作 比如 if a==b then c=a;c=a+b将xx赋值给xx,或者循环/判断实际上,陈述也包含了表达式,因此,我们可以将lambda表达式当成可以输出一个值。
2022-11-26 11:23:29
429
原创 Java项目使用intellij-IDEA查看依赖包版本是否有冲突(方法及工具)附截图
本文描述了如何使用idea方便地查看依赖是否冲突以及如何解决依赖冲突的办法
2022-11-23 17:01:04
13449
1
原创 深度优先遍历DFS 非递归算法理解与Java实现(TreeNode树状结构非数组输入)
问题给出一个类TreeNode,如何对其进行非递归的DFS进行遍历?/* * public class TreeNode { * int val = 0; * TreeNode left = null; * TreeNode right = null; * } */思路数据结构非递归进行图的遍历会用到两种数据结构,栈与队列。考虑到两种数据结构的特性,不难想出栈更适合深度优先遍历,队列更适合广度优先遍历。算法细节针对深度优先遍历算法这里不多加赘述了,总结起来DFS就是一
2021-10-05 15:09:38
1453
4
原创 google sheets/google drive权限无法认证成功
这两天在做一个项目,但是一直卡在google权限认证无法通过,虽然知道国内用googlesheets或者google服务的并不多,但是实在是不想其他人复制我的心酸历程了,能帮到一些算一些吧。遇到的问题1. credentials_service_account() trying credentials_service_account() 错误: parse error: premature EOF (right here) ------^2. Error in curl::curl_fetch_m
2021-04-08 11:14:35
1812
2
原创 [Ubuntu 更换java版本]警告: 链接组 java 已损坏,故强制重新安装候选项 的解决方案
安装好了openjdk8和openjdk11之后,使用命令 sudo update-alternatives --config java 更换版本时,出现错误update-alternatives: 使用 /usr/lib/jvm/java-8-openjdk-amd64/jre/bin/java 来在手动模式中提供 /usr/bin/java (java)update-alternatives: 警告: 将不会把 /usr/bin/java 替换为链接我的解决方案是这样的:第一个告警提及了/
2021-03-17 15:35:36
2434
原创 每天一个R语言小技巧(4)—— 获取数据类型(单个变量,dataframe数据框中的每列,每个元素)
知识点自测R的对象类型都有什么?数据类型有什么?如何获取一个变量的数据类型?如何获取向量中每个元素的数据类型?答案R的对象类型一共七种vector 向量list 列表matrix 矩阵array 数组factor 因子data.frame 数据框scalar 标量数据类型有非常多种,我们平时会接触到的有如下类型numericcomplexlogicalcharacternulldoublelist…首先搞懂自己想要的是对象类型还是数据类型!!!获
2021-03-17 12:00:11
13007
原创 从0到0.1学习 RPC远程过程/方法调用
全称:Remote Procedure Call Protocol 远程过程调用协议标签:分布式远程调用为什么需要RPC两台服务器之间想要互相/单方面的调用另一台服务器上面的函数或者方法,这时不共享一个内存空间的两台服务器并不能直接调用,只能通过网络来传达要调用的信息与返回值。RPC实际上是让我们用像调用本地函数一样去调用远程的函数。所以远程调用会产生的问题是什么呢?函数ID映射:怎么告诉另一台服务器我想要的是A函数,而不是BCD函数呢?所以在RPC中,每个函数都要拥有一个自己的ID,在
2021-03-10 17:28:11
121
原创 从0到0.1学习 包管理工具YARN
带着问题学习yarn是什么全称:Yet Another Resource Negotiator属性:包管理工具、运算资源调度器、依赖管理工具yarn基本分为三大模块主管角色是ResourceManager(全局资源管理系统),提供运算资源的角色是NodeManager(单台机器/单个节点的资源管理器)ResourceManager 负责所有资源的监控、分配和管理;ApplicationMaster 负责每一个具体应用程序的调度和协调;NodeManager 负责每一个节点的维护。为什么会
2021-03-08 17:47:07
102
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人