Title:Conditional Generative Adversarial Nets
Paper:pdf
摘要:介绍一种有条件的Gan,通过输入数据y来构造。做了2个实验,根据类标签生成MNIST数字和学习一个多模态模型,该方法成功生成了不属于训练标签的描述性标记。
一. CGAN思想
这项工作提出了一种带条件约束的GAN,在生成模型(D)和判别模型(G)的建模中均引入条件变量y(conditional variable y),使用额外信息y对模型增加条件,可以指导数据生成过程。这些条件变量y可以基于多种信息,例如类别标签,用于图像修复的部分数据,来自不同模态(modality)的数据。如果条件变量y是类别标签,可以看做CGAN 是把纯无监督的 GAN 变成有监督的模型的一种改进。这个简单直接的改进被证明非常有效,并广泛用于后续的相关工作中。Mehdi Mirza et al. 的工作是在MNIST数据集上以类别标签为条件变量,生成指定类别的图像。作者还探索了CGAN在用于图像自动标注的多模态学习上的应用,在MIR Flickr25000数据集上,以图像特征为条件变量,生成该图像的tag的词向量。
二. 相关工作
许多有趣的问题更自然地被认为是概率一对多映射。例如,在图像标记的情况下,可能有许多不同的标签可以适当地应用于给定的图像,不同的(人类)注释器可能使用不同的(但通常是同义或相关的)术语来描述相同的图像。
解决方案:CGAN。使用条件概率生成模型,将输入作为条件变量,将一对多映射实例化为条件预测分布。
三. CGAN实现方法
1.原始GAN