Beyond Face Rotation: 使用全局和局部特征的双通道generator生成正脸

        Beyond Face Rotation:超级面部旋转

        Global and Local Perception GAN for Photorealistic and Identity Preserving Frontal View Synthesis:全局和局部感知的GAN用于分析合成正面图片。

        Abstract

      Beyond Face Rotation: 使用全局和局部特征的双通道generator生成正脸_第1张图片
#使用TP-GAN合成正面视图(此处指人脸)。上半部分展示了90°侧脸(中间)以及生成的和真实的正脸。我们邀      请读者来猜测哪边是合成的。下半部分分别展示了从90°、75°、45°侧脸生成的正脸。


  一   要解决的问题:

            基于单张人脸图像的正面视图(即正脸)合成,在人脸识别领域有广泛的应用。

二    本文使用的方法

     1    two-pathway GAN:双通道GAN,一个global ,一个local。

Beyond Face Rotation: 使用全局和局部特征的双通道generator生成正脸_第2张图片

2 loss function

判别器loss:maximum 生成图片与真实图片,使用交叉熵

生成器(创新点)loss,由五个部分组成:

2.1 pixel loss


像素损失


使用拉普拉斯像素损失,就是算个mean_pixelloss.

2.2 symmetry loss

对称损失:利用人脸的对称性

Beyond Face Rotation: 使用全局和局部特征的双通道generator生成正脸_第3张图片

图像左右两个部分对应像素的L1损失

2.3 adversarial loss

对抗损失:同单通道GAN相同


2.4  Identity Preserviing loss

身份验证损失:

Beyond Face Rotation: 使用全局和局部特征的双通道generator生成正脸_第4张图片

Light CNN 最后两层的身份验证损失

2.5 total variation regularization

添加了正则损失

你可能感兴趣的:(DeepLearning,Computer,Vision,Gan,Images,Processing,GAN,Frontal,View,Synthesis,TP-GAN,Face,Rotation)