- 博客(4)
- 收藏
- 关注
原创 二值网络:训练权重和激活值限制在+1或-1的神经网络
Binarized Neural Networks: Training Neural Networks with Weights and Activations Constrained to +1 or -1介绍这篇论文主要作了以下改进:1.引入一种训练二值神经网络的方法。在运行时,以及在训练的过程中计算参数梯度时,神经网络具有二值的权重和激活值。2.做了两套实验,每一套在不同的框架下完成...
2019-03-20 17:06:54
1458
原创 深度学习中的正则化技术--DropOut&DropConnect
上次的有L1,L2范数正则化,这次介绍 DropOut及其衍生出来的DropConnectL1,L2范数正则化与 DropOut正则化的原理有本质上的不同Drout的原理是dropout是在经过激活函数之后,再经过一个函数用于控制是否输出,不输出的概率是pdropout对于提升性能有很大提升,最主要的观点是从集成学习的角度解释的以天气预报为例,预测未来7天的天气,5个分类器同时...
2018-12-25 11:48:52
782
原创 关于机器学习的一些思考
关于机器学习的一些思考说明为什么要去线性化(为什么要加激活函数)为什么要引入relu函数层数的增加对于正确率的影响随机梯度下降法 批量梯度下降法 小批量梯度下降法正则化说明从九月份入学到现在已经三个月了,整个过程都处于忙碌的状态。不仅要完成每周的作业,每周还要和导师汇报机器学习的学习进度。在整个过程中遇到了各种各样的问题,这里选择几个写一写。为什么要去线性化(为什么要加激活函数)为什么要...
2018-12-05 18:59:31
510
原创 数字图像处理第一次作业——JPEG格式与压缩流程分析
数字图像处理第一次作业——JPEG格式与压缩流程分析欢迎阅读1.JPEG格式综述2.颜色模式转换2. 采样3.分块4. DCT离散余弦变换5. Zigzag扫描排序7.DC系数的差分脉冲调制编码(DC-DPCM)设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导...
2018-11-13 11:57:13
4598
4
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人