Beyond Face Rotation:超级面部旋转
Global and Local Perception GAN for Photorealistic and Identity Preserving Frontal View Synthesis:全局和局部感知的GAN用于分析合成正面图片。
Abstract
#使用TP-GAN合成正面视图(此处指人脸)。上半部分展示了90°侧脸(中间)以及生成的和真实的正脸。我们邀 请读者来猜测哪边是合成的。下半部分分别展示了从90°、75°、45°侧脸生成的正脸。
一 要解决的问题:
基于单张人脸图像的正面视图(即正脸)合成,在人脸识别领域有广泛的应用。
二 本文使用的方法
1 two-pathway GAN:双通道GAN,一个global ,一个local。
2 loss function
判别器loss:maximum 生成图片与真实图片,使用交叉熵
生成器(创新点)loss,由五个部分组成:
2.1 pixel loss
像素损失
使用拉普拉斯像素损失,就是算个mean_pixelloss.
2.2 symmetry loss
对称损失:利用人脸的对称性
图像左右两个部分对应像素的L1损失
2.3 adversarial loss
对抗损失:同单通道GAN相同
2.4 Identity Preserviing loss
身份验证损失:
Light CNN 最后两层的身份验证损失
2.5 total variation regularization
添加了正则损失

该博客介绍了如何运用全局和局部感知的双通道GAN(TP-GAN)来实现照片级真实感且保留身份信息的正面人脸合成。通过像素损失、对称损失、对抗损失、身份保持损失以及正则化等多方面损失函数,确保生成的正脸图像既逼真又保持原始身份特征。
7144

被折叠的 条评论
为什么被折叠?



