深度学习中的注意力机制

深度学习中的注意力机制分为两种类型:

Additive attention 加法注意 Bahdanau: 双向rnn,并且

Multiplicative attention   乘法注意 Luong 有三种计算方法

你可能感兴趣的:(深度学习中的注意力机制)