- 博客(5)
- 收藏
- 关注
原创 基于Ubuntu22.04的代理配置与XRDP远程桌面连接
需要连接研究室内网服务器工作,因此涉及对apt的proxy配置以及远程桌面的相关问题解决。
2023-12-04 13:18:05
1760
原创 关于网络权重初始化
神经网络的训练可以简化如下:预处理(Scaling,…) -> 初始化网络weight与bias ->(Forward Propagation)以获得网络输出 -> 根据输出计算损失函数获取当前损失 -> 利用链式法则进行(Back Propagation),逐层回传损失函数对当前参数梯度值,使用更新参数 -> 重复前面步骤直至到达epoch或早停条件成立。下面附上一张Medium上的网络前向及反向传播示意。2. 反向传播更新参数Wt1Wt−ηdWdJ式中JJW。
2023-11-24 15:09:23
115
1
原创 自编码器(AE)与堆叠自编码器(SAE)
自编码器将输入信息作为学习目标进行表征学习(Representation Learning),以获得有效的数据表示。AE作为无监督学习,由编码器与解码器构成,编码器负责将高维空间的输入映射到低维空间,而解码器将根据低维空间重构数据进行输出,见下图所示。aσW1xb1zxσW2ab2公式中,b和W分别标为编解码器的偏置与权重,σ表示激活函数。在重构特征时,通常使用平方误差或均方误差(MAE)等进行参数调整,见下面公式:θargθmin。
2023-11-16 14:01:24
1022
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人