3.2.3 自然语言处理 NLP

NLP 几大任务

自然语言处理（简称NLP），是研究计算机处理人类语言的一门技术，包括：

句法语义分析：对于给定的句子，进行分词、词性标记、命名实体识别和链接、句法分析、语义角色识别和多义词消歧。
信息抽取：从给定文本中抽取重要的信息，比如，时间、地点、人物、事件、原因、结果、数字、日期、货币、专有名词等等。通俗说来，就是要了解谁在什么时候、什么原因、对谁、做了什么事、有什么结果。涉及到实体识别、时间抽取、因果关系抽取等关键技术。
文本挖掘（或者文本数据挖掘）：包括文本聚类、分类、信息抽取、摘要、情感分析以及对挖掘的信息和知识的可视化、交互式的表达界面。目前主流的技术都是基于统计机器学习的。
机器翻译：把输入的源语言文本通过自动翻译获得另外一种语言的文本。根据输入媒介不同，可以细分为文本翻译、语音翻译、手语翻译、图形翻译等。机器翻译从最早的基于规则的方法到二十年前的基于统计的方法，再到今天的基于神经网络（编码-解码）的方法，逐渐形成了一套比较严谨的方法体系。
信息检索：对大规模的文档进行索引。可简单对文档中的词汇，赋之以不同的权重来建立索引，也可利用1，2，3的技术来建立更加深层的索引。在查询的时候，对输入的查询表达式比如一个检索词或者一个句子进行分析，然后在索引里面查找匹配的候选文档，再根据一个排序机制把候选文档排序，最后输出排序得分最高的文档。
问答系统：对一个自然语言表达的问题，由问答系统给出一个精准的答案。需要对自然语言查询语句进行某种程度的语义分析，包括实体链接、关系识别，形成逻辑表达式，然后到知识库中查找可能的候选答案并通过一个排序机制找出最佳的答案。
对话系统：系统通过一系列的对话，跟用户进行聊天、回答、完成某一项任务。涉及到用户意图理解、通用聊天引擎、问答引擎、对话管理等技术。此外，为了体现上下文相关，要具备多轮对话能力。同时，为了体现个性化，要开发用户画像以及基于用户画像的个性化回复。

随着深度学习在图像识别、语音识别领域的大放异彩，人们对深度学习在NLP的价值也寄予厚望。再加上AlphaGo的成功，人工智能的研究和应用变得炙手可热。自然语言处理作为人工智能领域的认知智能，成为目前大家关注的焦点。很多研究生都在进入自然语言领域，寄望未来在人工智能方向大展身手。但是，大家常常遇到一些问题。俗话说，万事开头难。如果第一件事情成功了，学生就能建立信心，找到窍门，今后越做越好。否则，也可能就灰心丧气，甚至离开这个领域。这里针对给出我个人的建议，希望我的这些粗浅观点能够引起大家更深层次的讨论。

来源：知乎微软亚洲研究院

NLP 任务解决情况

句法语义分析：
信息抽取：
文本挖掘：
机器翻译：
信息检索：
问答系统：
对话系统：

NLP 阅读资料

国际学术组织、学术会议与学术论文
- 协会 The Association for Computational Linguistics(ACL)
  - 兴趣小组 SIGDAT(Linguistic data and corpus-based approaches to NLP)
  - 兴趣小组 SIGNLL(Natural Language Learning)
- 会议 EMNLP(Conference on Empirical Methods on Natural Language Processing)
- 会议 CoNLL(Conference on Natural Language Learning)
- 协会 International Committee on Computational Linguistics
- 会议 COLING(Interantional Conference on Computational Linguistics)
- 网站 ACL Anthology
- 期刊 Computational Linguistics
- 期刊 Transactions of ACL, TACL
- 期刊 ACM Transactions on Speech and Language Processing
- 期刊 ACM Transactions on Asian Language Information Processing
- 期刊 Journal of Quantitative Linguistics
- 信息检索和数据挖掘领域相关会议 SIGIR
- 信息检索和数据挖掘领域相关会议 WWW
- 信息检索和数据挖掘领域相关会议 WSDM
- 人工智能领域相关会议 AAAI
- 人工智能领域相关会议 IJCAI
- 人工智能领域相关期刊 Artificial Intelligence
- 人工智能领域相关期刊 Journal of AI Research
- 机器学习领域相关会议 ICML
- 机器学习领域相关会议 NIPS
- 机器学习领域相关会议 AISTATS
- 机器学习领域相关会议 UAI
- 机器学习领域相关期刊 Journal of Machine Learning Research (JMLR)
- 机器学习领域相关期刊 Machine Learning (ML)
- 中国计算机学会推荐国际学术会议和期刊目录
- 博客 natural language processing
- ACL Wiki
- 文章 NOW Publisher - Foundations and Trends
- 文章 Morgan & Claypool Publisher - Synthesis Lectures on Human Language Technologies
- 演讲 videolectures.net
国内学术组织、学术会议与学术论文
- 协会中国中文信息学会
  - 协会理事名单
- 会议全国计算语言学学术会议(CCL)
- 会议全国青年计算语言学研讨会(YCCL)
- 会议全国信息检索学术会议(CCIR)
- 会议全国机器翻译研讨会(CWMT)
- 会议自然语言处理与中文计算会议 (NLP&CC)
- 期刊中文信息学报
- 期刊计算机学报
- 期刊软件学报
- 微博王威廉
- 微博李沐
- 博客 52nlp

来源：刘知远博客

课程 Stanford NLP - Professor Dan Jurafsky & Chris Manning

3.2.3 自然语言处理 NLP

NLP 几大任务

NLP 任务解决情况

NLP 阅读资料

你可能感兴趣的:(3.2.3 自然语言处理 NLP)