自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(3)
  • 收藏
  • 关注

原创 基于STM32通过DS18B20读取温度并在OLED屏幕显示

硬件型号:STM32F103C8T6、DS18B20传感器,OLED屏幕。基于STM32通过DS18B20读取温度并在OLED屏幕显示

2023-07-30 14:21:31 5052 15

原创 2024春《生成式 AI》李宏毅笔记

Token是语言模型处理文本的基本单位。模型的输入和输出均以token为单位。输入的句子首先会被拆分为一个个token,形成token序列(token sequence)。比如输入“introduction of generative ai”,转换成的token就有可能是[int, roduction, of, gener, ative, AI]。每种语言模型都有一个预先定义的token列表,决定如何将文本拆分为token。这样的转化是人为设定的,不需要训练参数。

2025-06-20 13:14:00 410

原创 pytorch深度学习

即使层数多了,化简后还是线性函数,而实际情况下模型大概率是非线性的,因此要加入非线性函数。如果导数大于零,那么如果w变大,loss值会上升,所以w应该往导数的负方向走【即向左走】如果导数大于零,那么如果w变小,loss值会上升,所以w应该往导数的负方向走【即向右走】但是随机的话,导致无法并行,时间复杂度太高,因为当前的 w 必须由上一个 w 来算。上标是样本数,下标是特征,转换成矩阵运算,可以利用并行计算的能力,提高整个运算的速度。因此,折中,那就采用 mini-batch,随机选一批数据来进行梯度下降。

2025-04-17 13:57:52 577

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除