- 博客(3)
- 收藏
- 关注
原创 基于STM32通过DS18B20读取温度并在OLED屏幕显示
硬件型号:STM32F103C8T6、DS18B20传感器,OLED屏幕。基于STM32通过DS18B20读取温度并在OLED屏幕显示
2023-07-30 14:21:31
5052
15
原创 2024春《生成式 AI》李宏毅笔记
Token是语言模型处理文本的基本单位。模型的输入和输出均以token为单位。输入的句子首先会被拆分为一个个token,形成token序列(token sequence)。比如输入“introduction of generative ai”,转换成的token就有可能是[int, roduction, of, gener, ative, AI]。每种语言模型都有一个预先定义的token列表,决定如何将文本拆分为token。这样的转化是人为设定的,不需要训练参数。
2025-06-20 13:14:00
410
原创 pytorch深度学习
即使层数多了,化简后还是线性函数,而实际情况下模型大概率是非线性的,因此要加入非线性函数。如果导数大于零,那么如果w变大,loss值会上升,所以w应该往导数的负方向走【即向左走】如果导数大于零,那么如果w变小,loss值会上升,所以w应该往导数的负方向走【即向右走】但是随机的话,导致无法并行,时间复杂度太高,因为当前的 w 必须由上一个 w 来算。上标是样本数,下标是特征,转换成矩阵运算,可以利用并行计算的能力,提高整个运算的速度。因此,折中,那就采用 mini-batch,随机选一批数据来进行梯度下降。
2025-04-17 13:57:52
577
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅