人工智能-语音交互-NLP自然语言(一) 词法分析

NLP自然语言处理(一) 词法分析

1.什么是自然语言处理NLP(natural language processing)?

如图所示: 我希望计算机对房间的评论结果是,可以欣赏日出。

因此我理解的NLP实际上就是让计算机和人一样理解语言.

2.词法分析：

法分析向用户提供分词、词性标注、命名实体识别三大功能。该服务能够识别出文本串中的基本词汇（分词），对这些词汇进行重组、标注组合后词汇的词性，并进一步识别出命名实体.

1)分词 中文分词是将连续的自然语言文本，切分成具有语义合理性和完整性的词汇序列的过程。

致毕业和尚未毕业的同学,我们更希望计算机得到的结果是"和"与"尚未"分开查询,而不是"和尚"与"未"分开查询.

2)词性标注 词性标注（Part-of-Speech tagging 或POS tagging）是指为自然语言文本中的每个词汇赋予一个词性 的过程。

3)命名实体 命名实体识别（Named Entity Recognition 简称NER），又称“专名识别”，是指识别自然语言文本中具有特定意义的实体，主要包括人名、地名、机构名、时间日期等。