lollows的博客

上一篇文章主要与SVM求导相关，本文则介绍Softmax的loss与梯度的计算。根据cs231n——Linear Classification，Softmax的loss函数公式为：L=1N∑iLi+λ∑k∑lWk,l2=1N∑i−log⁡(efyi∑jefj)+λ∑k∑lWk,l2=−1N∑i(fyi−log⁡∑jefj)+λ∑k∑lWk,l2(1)L =\frac { 1 } { N } \...

CS231n是斯坦福大学视觉与学习实验室开设的面向视觉识别的卷积神经网络公开课，主讲是李飞飞及其学生。该课程(最新Spring 2019)是学习深度学习与机器视觉必备的入门课程之一。本学习系列主要是记录自己三个课后作业以及对课程的学习笔记。本篇文章主要记录Assignment #1的学习情况。Assignment #1包含5个小作业：kNN、SVM、Softmax、Two-Layer NN和Im...