深度学习中逻辑回归损失函数为什么这么定义

本文探讨了凸函数和凸集的基本概念及其在数学优化中的重要性。通过定义凸集和凸函数,解释了为什么在某些场景下选择特定类型的函数作为损失函数。介绍了凸集的性质及凸函数的定义,并探讨其与损失函数之间的联系。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

这里不由的会想,为什么要引入这样的函数,而不是两个数相减或相减的平方。首先引入凸集这个概念:

如果对于任意x1,x2属于C,a属于[0,1]的闭区间,则a*x1+(1-a)x2属于C 可推出C是凸集的充要条件。

有没有发现上面损失函数与下面凸集定义的形式差不多,上面y是属于0到1,凸集的性质大家可以看看书。

凸函数(convex function)

f((x1+x2)/2)<(f(x1)+f(x2))/2

定义Df为凸集,对于任意下x,y属于Df,a属于[0,1],则有f(ax+(1-a)y)<=af(x)+(1-a)f(y)




评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值