Human Segmentation论文记录(个人)

Human Segmentation

PortraitFCN★

[Paper] Automatic Portrait Segmentation for Image Stylization
[Year] Eurographics 2016
[Author] Xiaoyong Shen, Aaron Hertzmann, Jiaya Jia, Sylvain Paris, Brian Price, Eli Shechtman, Ian Sachs
[Pages] http://xiaoyongshen.me/webpage_portrait/index.html
[Description]
1) 粗读, 较早的用CNN做全自动portrait segmentation的paper, backbone为FCN;
2) 首先检测facial feature points，将portrait从图像中crop出来，并得到当前图像与canonical pose的homography transform (T). T用于对齐当前图像与canonical pose, 计算normalized的位置特征, 和得到形状先验.
3) position特征和shape特征与crop出来的人像一起作为FCN的输入, 由FCN得到最后的分割结果

BSN★

[Paper] Boundary-sensitive Network for Portrait Segmentation
[Year] arXiv 1712
[Author] Xianzhi Du, Larry Davis
[Pages]
[Description]
1) 提升边界分割精度的paper，主要针对portrait segmentation，提出三个策略
2) individual boundary-sensitive kernel: 先用Canny从真值图中得到边缘，再通过dilation得到边缘的soft label。Kernel为1x3的vector，里面分别是从soft label计算得到的前景，背景和边缘的可能性。计算loss时用此Kernel为每个像素的不同channel加权
3) global boundary-sensitive kernel: 在训练集上通过统计平均的方法得到position sensitive prior。计算loss时用此Kernel对不同位置的pixel加权
4) boundary-sensitive attribute classifier: 没看懂