李宏毅NLP课程学习笔记（1）Deep Learning for Human Language Processing（Course Overview）

基础概念

• Deep Learning for Human Language Processing 深度学习与人类语言处理
• Natural Language Processing, NLP 自然语言处理
• 音频Audio的复杂度/大小：1 seconds has 16k sample points; Each point has 256 possible values.
• 使用模型：Deel Network（遇到问题，硬train一发就对了；没有硬train一发解决不了的问题；如果有的话，那只是训练资料和GPU不够多）
• （语音->文字）语音辨识：Automatic Speech Recognition, ASR 语音辨识
• （文字->语音）语言合成：Google小姐
• （语音->语音）Speech Separation；鸡尾酒会效应，cocktail party effect；Voice Conversion
• （语音->所属类别）Speaker Recognition; Keyword Spotting
• BERT，Bidirectional Encoder Representation from Transformers 来自变压器的双向编码器表示
• （语音->文字）传统的语音识别，Autoregressive Model，按顺序翻译，使用RNN即可做到； 
• Non-autoregressive Model，不按顺序翻译，先生成最关键单词
• （文字->文字）Translation；Summarization（对文章自动摘要）；Chat-bot；Question Answering
• Meta Learning，让机器学会如何学习，learn to learn