
大模型微调
文章平均质量分 90
广煜永不挂科
一名计算机科学大学生,偶尔发一下学习笔记,如果有错,感谢指正。(阿里嘎多)
展开
-
神经网络框架的基本设计
损失函数是用来量化模型预测值与真实值差距的方式(这么说可能过于抽象,我们初中数学应该学过标准差和方差的概念,方差和标准差是量化数组各元素与平均值的差距的。输出层:输出最终结果,通常是一个softmax层,用于多分类任务,或者是一个sigmoid层,用于二分类任务。torch.nn模块:是构建神经网络的基石,提供了各种类型的层,包括卷积层、池化层、激活函数、循环层和全连接层。由于有多个层,参数需要在这些层之间传递。确定网络结构、激活函数、损失函数、优化算法,模型的训练与验证,模型的评估和优化,模型的部署。原创 2024-01-05 14:52:08 · 1668 阅读 · 0 评论 -
PyTorch2.0环境搭建
pip list 是 Python 命令行中用于查看当前安装的第三方库的命令。pycharm的python解释器的作用,是一个接口,可以理解为一条数据线,连接着python和pycharm。出现这个错误的原因之一是你的pip第三方库的安装路径和你在第二部中配置的python解释器的环境不一致。右上角点开配置器、编辑配置、选择想要编辑的配置、选择python解释器、应用、运行。文件、设置、Python解释器、设置标志、添加、现有环境、复制下方路径、确定、应用。输入:python,打开python。原创 2023-12-01 14:41:29 · 1268 阅读 · 0 评论 -
Hello World!
深度学习的第一个程序原创 2023-12-05 15:39:13 · 2135 阅读 · 2 评论 -
PyTorch2.0环境搭建(二)
pytorch有cpu和gpu两个版本,区别是:1、硬件要求:CPU版本运算只与CPU版本有关;GPU版本还需要额外链接N卡,可以通过N卡进行加速2、运行速度:GPU版本比CPU版本在复杂数据和密集计算过程中的环境中更有优势3、软件需求:GPU版本需要额外安装CUDA和cuDNN两个驱动程序。4、兼容性,CPU版本取决于CPU的版本,GPU版本受限于CUDA的版本如果只是微调着玩玩则可以直接安装CPU版本,如果显卡配置较好则可以安装2.0以上的Pytorch。原创 2023-12-01 18:46:05 · 2525 阅读 · 0 评论