【论文阅读】Affect Expression Behaviour Analysis in the Wild using Spatio-Channel Attention and 。。。

总体结构:

【论文阅读】Affect Expression Behaviour Analysis in the Wild using Spatio-Channel Attention and 。。。_第1张图片

SCAN结构:

【论文阅读】Affect Expression Behaviour Analysis in the Wild using Spatio-Channel Attention and 。。。_第2张图片

 

网络结构

包含两个分支:(1)利用空间注意力机制的局部和全局注意分支;(2)互补上下文信息。

(1) 利用空间注意力机制的局部和全局注意分支

肉眼所见即全部:输入为Conv-3的输出,将Conv-3的输出分成很多个小块,每个小块分别用SCAN处理,得到局部特征;同时还用SCAN处理整个Conv-3的输出,得到全局特征。二者结合,然后分类。这个分支(1)会得到一个loss。

(2)互补上下文信息

肉眼所见即全部:输入为Conv-4的输出,用通道注意力ECA处理Conv-4的输出,然后分成很多个小块,最后对每个小块进行分类 。这个分支(2)会得到很多个loss。

 

Loss:两个分支的loss加权求和

 

网络训练

【论文阅读】Affect Expression Behaviour Analysis in the Wild using Spatio-Channel Attention and 。。。_第3张图片

你可能感兴趣的:(深度学习,机器学习,pytorch)