jieba是python中一个重要的标准函数库_python——Jieba库整理（基础知识+实例）

先上目录,1.Jieba库是什么

2.Jieba库的使用（常见方法及函数）

3.实例——英文文本解析和中文文本解析

1.Jieba库是什么

Jieba库是优秀的中文分词第三方库，中文文本需要通过分词获得单个的词语。

Jieba库的分词原理：利用一个中文词库，确定汉字之间的关联概率，汉字间概率大的组成词组，形成分词结果。除了分词，用户还可以添加自定义的词组。

2.Jieba库的使用

Jieba库分词有3种模式

1）精确模式：就是把一段文本精确地切分成若干个中文单词，若干个中文单词之间经过组合，就精确地还原为之前的文本。其中不存在冗余单词。

2）全模式：将一段文本中所有可能的词语都扫描出来，可能有一段文本它可以切分成不同的模式，或者有不同的角度来切分变成不同的词语，在全模式下，Jieba库会将各种不同的组合都挖掘出来。分词后的信息再组合起来会有冗余，不再是原来的文本。

3）搜索引擎模式：在精确模式基础上，对发现的那些长的词语，我们会对它再次切分，进而适合搜索引擎对短词语的索引和搜索。也有冗余。

Jieba库常用函数：重点记输入什么类型（字符串？列表？）、输出什么类型（字符串？列表？）；

搜索引擎模式：首先按照精确模式进行分词，分出来有“中华人民共和国”这个词，搜索引擎模式觉得它太长，又对改词进行了切词。

3.实例——要注意英文文本和中文文本解析的不同方法

1&#x