Confidence Linear Classification

本文介绍了一种新的线性分类方法——信心加权线性分类。不同于传统的线性分类模型,该方法不仅考虑了参数的估计,还加入了对参数置信度的考量。在线学习的环境下,该算法同时更新分类器参数及其置信度估计,维持参数向量的高斯分布,并随着每个实例的出现更新分布的均值和协方差。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

本质上还是一种linear classifcation,但是非常有意思的一点是,对于绝大多线性分类模型,我们都是先有了参数,然后再去计算参数的方差。一般来讲,参数的方差都是和模型的参数相关的,会有一个公式来描述这二者的关系。

但是在这个模型里,我们假设线性分类模型的参数,服从一个正态分布,却并没有用一个公式来描述均值与方差之间的关系。在普通的linear classifcation里,我们做最优化的objective function一般都是loss function,但是在confidence linear classifcation里,我们最优化的是两个模型之间的距离。

这online learning的一种。

Abstract: We introduce confidence-weighted linear classifiers, which add parameter confidence information to linear classifiers. Online learners in this setting update both classifier parameters and the estimate of their confidence. The particular online algorithms we study here maintain a Gaussian distribution over parameter vectors and update the mean and covariance of the distribution with each instance.

文献:Confidence-Weighted Linear Classification by Dredze at al.

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值