1.什么是softmax函数:
首先给出softmax函数的公式:
这个式子表示假设输出层共有n个神经元,计算第k个神经元的输出。softmax函数的分子是输出层输入信号
的指数函数,分母是所有输入信号的指数函数的和。
"soft" because still assigns some probability to smallest
"max" because amplifies probability of larges