动手学深度学习-自然语言处理:应用

自然语言处理中的应用主要有哪些?

动手学深度学习-自然语言处理:应用_第1张图片
动手学深度学习-自然语言处理:应用_第2张图片
动手学深度学习-自然语言处理:应用_第3张图片
动手学深度学习-自然语言处理:应用_第4张图片

自然语言处理:应用

动手学深度学习-自然语言处理:应用_第5张图片

情感分析及数据集

  • 情感分析研究人们在文本中的情感,这被认为是一个文本分类问题,它将可变长度的文本序列进行转换为固定长度的文本类别。
  • 经过预处理后,我们可以使用词表将IMDb评论数据集加载到数据迭代器中。
    动手学深度学习-自然语言处理:应用_第6张图片
    动手学深度学习-自然语言处理:应用_第7张图片
    动手学深度学习-自然语言处理:应用_第8张图片

情感分析:使用循环神经网络

  • 预训练的词向量可以表示文本序列中的各个词元。
  • 双向循环神经网络可以表示文本序列。例如通过连结初始和最终时间步的隐状态,可以使用全连接的层将该单个文本表示转换为类别。

使用RNN进行情感分析的一般步骤:
动手学深度学习-自然语言处理:应用_第9张图片
动手学深度学习-自然语言处理:应用_第10张图片
动手学深度学习-自然语言处理:应用_第11张图片

情感分析:使用卷积神经网络

  • 一维卷积神经网络可以处理文本中的局部特征,例如n元语法。
  • 多输入通道的一维互相关等价于单输入通道的二维互相关。
  • 最大时间汇聚层允许在不同通道上使用不同数量的时间步长。
  • textCNN模型使用一维卷积层和最大时间汇聚层将单个词元表示转换为下游应用输出。

textCNN模型
动手学深度学习-自然语言处理:应用_第12张图片
动手学深度学习-自然语言处理:应用_第13张图片

什么是一维卷积:
动手学深度学习-自然语言处理:应用_第14张图片
动手学深度学习-自然语言处理:应用_第15张图片
小结:

  • 一维卷积神经网络可以处理文本中的局部特征,例如n元语法。
  • 多输入通道的一维互相关等价于单输入通道的二维互相关。
  • 最大时间汇聚层允许在不同通道上使用不同数量的时间步长。
  • textCNN模型使用一维卷积层和最大时间汇聚层将单个词元表示转换为下游应用输出。

你可能感兴趣的:(深度学习,深度学习,自然语言处理,人工智能)