不平衡数据分类

本文探讨了不平衡数据集在广告点击、信用卡欺诈和推荐系统等场景中的问题,并提出了解决方案,包括抽样(随机欠采样和随机过采样,特别是SMOTE方法)和代价敏感学习,强调在不同误分类情况下的代价差异,以及在模型训练中的应用策略。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1、不平衡数据集举例

  • 网页中有很多广告,我们只会点击很少量我们感兴趣的广告。广告被点击  y=1  的样本要比 y=0的少很多。
  • 信用卡欺诈,不会还款的只是少数
  • 推荐系统,推荐的物品被购买的比例很低

2、解决方案

  • 从数据的角度:抽样

数据不是不均衡嘛,通过抽样,让它变平衡就可以了。

  • 从算法的角度:代价敏感学习

不改动数据,就不能只考虑 正确率,还需要添加别的评价指标。于是 考虑 不同误分类情况下,代价不一样(代价敏感的学习)。

以信用卡举例,将正例误认为负例,代价为1,而负例误认为正例,代价10,甚至100

3、抽样

         

【1】随机欠采样

(1)抽取部分。所以,容易造成信息缺失。解决:集成学习

(2)又分为 有放回、无放回采样。

【2】随机过采样

(1࿰

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值