经过前面的学习,我们已经知道在解决问题时,重要的不仅仅是要在算法A或算法B中选择更优的,而是考虑怎么选择用于学习算法的特征和正则化参数,相比神经网络和逻辑回归,支持向量机在这两个方面做得更好。
优化目标(Optimization objective)
让我们先从逻辑回归开始讲起,看看如何通过一个小小的改动转为支持向量机。
逻辑回归图像
如图,假如我们有一个的样本,我们的期望是算法经过计算后预测的
,也就是
远远大于0;同理,对于
的样本期望也是其
远远小于0。
我们分别画出
经过前面的学习,我们已经知道在解决问题时,重要的不仅仅是要在算法A或算法B中选择更优的,而是考虑怎么选择用于学习算法的特征和正则化参数,相比神经网络和逻辑回归,支持向量机在这两个方面做得更好。
让我们先从逻辑回归开始讲起,看看如何通过一个小小的改动转为支持向量机。
逻辑回归图像
如图,假如我们有一个的样本,我们的期望是算法经过计算后预测的
,也就是
远远大于0;同理,对于
的样本期望也是其
远远小于0。
我们分别画出