域适应(Domain Adaptation)综述

本文概述了域适应的概念,探讨了训练集与测试集分布不一致(Domain shift)的三种情况,并重点介绍了在有限或无标签目标域数据下,如何通过特征提取和领域对抗训练来提升模型性能。文中提到了如何设计Feature Extractor以减少源域与目标域之间的差异,并借助Domain classifier和Label Predictor实现这一目标。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

根据李宏毅老师的视频所归纳的笔记

视频链接:https://www.bilibili.com/video/BV1TL411p7Us?spm_id_from=333.999.0.0

假设我们在训练集上训练黑底白字的手写数字集后(如下图),再把它用在同样是黑底白字的测试集上所得到的效果非常好(99.5%),但是如果把它用在有颜色的数字上的时候,它的效果就没之前那么好了(57.5%)。

 

若训练集和测试集的标签不同我们称之为Domain shift,它分为以下几种情况:第一种是在训练资料上是黑白的数字图片,而测试资料上是彩色的数字图片;第二种是在训练过程中的输出分布非常平均,而测试过程中的输出分布的概率差别很大;第三种是一张图片在训练资料中可能是“0”,而在测试资料中可能是“1”。

 需要域适应的场景:

第一种

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值