本文探讨了二分类任务中激活函数的选择问题，强调了sigmoid函数相对于softmax的优势，并且介绍了在不同情况下选择合适的优化器（如SGD与Adam）的方法。此外还讨论了BatchNormalization在小数据集上的应用及替代方案。
一.数据的格式
二.激活函数
二分类要用sigmoid,不能用softmax,公式如下：
三.优化器
sgd比adam在收敛阶段效果还好
四.BatchNormalization
数据量少，把BN去掉，换成归一化？
扫一扫
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
一.数据的格式
二.激活函数
二分类要用sigmoid,不能用softmax,公式如下：
三.优化器
sgd比adam在收敛阶段效果还好
四.BatchNormalization
数据量少，把BN去掉，换成归一化？
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
