【机器学习与深度学习理论要点】21. 损失函数及作用，交叉熵及作用？

1） 什么是损失函数，损失函数的作用是什么？

损失函数，用来度量预测值和实际值之间的差异，从而作为模型性能参考依据。损失值越小，说明预测输出和实际结果之间的差值就越小，也就说明我们构建的模型越好，反之说明模型越差。

2）什么是交叉熵，其作用是什么？

交叉熵主要用于度量两个概率分布之间的差异信息，在机器学习中用来作为分类问题的损失函数，当预测概率越接近真实概率，该函数值越小，反之越大。