【论文阅读】A Survey on Contrastive Self-supervised Learning
论文地址:https://arxiv.org/abs/2011.00362
介绍
有监督的方法的问题:
1、需要昂贵的标记数据
2、泛化性能差
3、遭受对抗攻击
大量的方法开始寻找不需要大量昂贵的标记的方法,通过自监督来学习特征表示
随着2014年GAN被提出,有许多基于GAN的自监督的生成模型,但是GAN也存在问题:
1、模型参数比较振荡,很难收敛
2、判别器通常比生成器训练得更好,使得生成器很难生成逼真的样本
对比学习是一种判别方法,旨在将相似样本靠近,将不同的样本之间距..
原创
2021-01-31 22:12:21 ·
2370 阅读 ·
0 评论