【Andrew Ng 深度学习】(五)序列模型

【Andrew Ng 深度学习】(五)序列模型

  • (五)序列模型
    • week 1. 循环序列模型
      • 1.1 为什么选序列模型
      • 1.3 循环神经网络模型
      • 1.4 通过时间的反向传播
      • 1.5 不同类型的RNN
      • 1.8 带有神经网络的梯度消失
      • 1.9 GRU单元
      • 1.10 长短期记忆(LSTM)
      • 1.11 双向循环神经网络
      • 1.12 深层循环神经网络
    • week 2. 自然语言处理与词嵌入
    • week 3. 序列模型和注意力机制


返回目录


【2021-5-8】

(五)序列模型

week 1. 循环序列模型

1.1 为什么选序列模型

语音识别、音乐生成、情感分类、DNA序列分析、及其翻译、视频行为识别、命名实体识别

1.3 循环神经网络模型

【Andrew Ng 深度学习】(五)序列模型_第1张图片

【Andrew Ng 深度学习】(五)序列模型_第2张图片

1.4 通过时间的反向传播

【Andrew Ng 深度学习】(五)序列模型_第3张图片

1.5 不同类型的RNN

【Andrew Ng 深度学习】(五)序列模型_第4张图片

1.8 带有神经网络的梯度消失

网络过深,梯度消失

1.9 GRU单元

  • RNN
    【Andrew Ng 深度学习】(五)序列模型_第5张图片
  • GRU
    【Andrew Ng 深度学习】(五)序列模型_第6张图片

1.10 长短期记忆(LSTM)

【Andrew Ng 深度学习】(五)序列模型_第7张图片
【Andrew Ng 深度学习】(五)序列模型_第8张图片

1.11 双向循环神经网络

【Andrew Ng 深度学习】(五)序列模型_第9张图片

1.12 深层循环神经网络

【Andrew Ng 深度学习】(五)序列模型_第10张图片

week 2. 自然语言处理与词嵌入

week 3. 序列模型和注意力机制

你可能感兴趣的:(【Andrew Ng 深度学习】(五)序列模型)