jieba分词

Jieba分词学习

大名鼎鼎的Jieba分词貌似在工业界被使用的频率较高，所以研究一下它的实现吧。
bellengao·2021-05-06 17:55

给文章起个亲人而受欢迎的题目（一）

通过Python爬取校园网特定栏目文章的标题、阅读量和回复量，然后用jieba分词分好所有的文章标题，最后对文章的阅读量和回复量进行聚类分析，得到结果。
文质彬彬彬·2021-05-04 05:38

Python jieba分词

1.安装jieba分词pipinstalljieba#有可能会报错，使用清华源没有报错2.切词的方法：jieba.cut()和jieba.cut_for_search()2.1jieba.cut()第一个参数
董小贱·2021-04-21 07:38

Python 分词工具大总结，盘点哪个更好用？

分词在自然语言处理中有着常见的场景，比如从一篇文章自动提取关键词就需要用到分词工具，中文搜索领域同样离不开分词Python中有很多开源的分词工具，下面给大家介绍几款常见的分词依赖库1.jieba分词“结巴
菜鸟学Python·2021-04-20 08:18

Python大佬用词云可视化带你分析海贼王、火影和死神三大经典动漫

利用Python网络爬虫爬取了豆瓣网，将网站上关于这三部动漫的评论全部抓取下来，之后通过Python的第三方库jieba分词进行词频统计和分析，最后通过matplotli
IT派森·2021-04-18 18:22

简述python四种分词工具,盘点哪个更好用?

分词在自然语言处理中有着常见的场景，比如从一篇文章自动提取关键词就需要用到分词工具，中文搜索领域同样离不开分词Python中有很多开源的分词工具，下面给大家介绍几款常见的分词依赖库1.jieba分词“结巴
·2021-04-17 20:15

py获取《灵笼》第一集的弹幕———绘制词云图

获取哔哩哔哩弹幕访问弹幕的接口heart中的cid参数查找点击查看历史弹幕oid的查找正则提取字幕写入txtjieba分词wordcloud生成词云图访问弹幕的接口前人栽树，后人乘凉。
yma16·2021-04-17 01:40

【数据可视化】利用WordCloud制作词云（2021-03-20）

利用wordcloud制作词云1.jieba分词链接：https://github.com/fxsjy/jieba“结巴”中文分词是一个使用起来非常方便的Python中文分词组件。
中传男明星皮皮·2021-03-20 15:19

文本特征抽取TfidfVectorizer(特征工程之特征提取)

文章目录前言一、jieba分词中文后再用CountVectorizer提取特征有何不妥？
不懂六月飞雪·2021-02-16 01:01

jieba分词+collections 词频统计

文章目录前言一、jieba分词（一）特点（二）主要功能1.分词（三）载入词典（四）载入词典（五）关键词抽取1.基于TF-IDF算法的关键词抽取2.基于TextRank算法的关键词抽取（六）词性标注二、collections
Txixi·2021-01-25 21:21

Python自动化爬取b站实时弹幕并制作WordCloud词云

暂时领先，未必最先达到终点一:jieba分词二:制作WordCloud词云这几日小夜斗一直在折腾于词云制作、力扣刷题、java学习、还有爬取微博评论数据的爬虫项目，一直没有功夫写博客，内心感到无比空虚，
夜斗小神社·2021-01-24 15:42

python人物关系抽取小说_用python分析小说人物关系（一）——理论篇

1、工具介绍jiebajieba分词，最好用的开源中文分词工具。他最主要的两个功能是分词和关键词的抽取。在这里，我们需要用他的分词功能来提取文本中的人名。
DISSLS·2021-01-13 10:31

python中文模糊关键词提取_python文本特征提取词频矩阵、中文文本的分词、jieba分词库...

单词、词语：作为特征值方法1：sklearn.feature_extraction.text.CountVectorizer(stop_words=[])，返回词语出现的次数，返回词频矩阵，stop_words=[]停用词列表·CountVectorizer.fit_transform(X)X：文本或者包含文本字符串的可迭代对象返回值：返回sparse矩降·CountVectorizer.inve
weixin_39633781·2021-01-04 05:44

用python读取某文件夹里所有文件的内容，然后用正则表达式匹配提取文件中需要的内容，用jieba分词后按比例划分数据集（包含读取json文件，存储、读取csv文件）

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档解决的问题1、用python读取某文件夹里所有文件的内容。2、用正则表达式匹配提取文件中需要的内容。3、用jieba进行分词。4、按比例划分数据集。5、读取json文件，存储、读取csv文件。1、引入库，设置路径importosimportjsonimportreimportpandasaspdpath='./da'#path='./
qq_41796035·2020-12-25 17:29

spacy分词器

spacy中文分词器spacy分词器介绍分词算法介绍分词模式介绍三种分词模式自定义词典关键词提取spacy分词器介绍spacy使用的中文jieba分词器，接下来对这个分词器进行简单介绍。
xiaoxiaoqian0519·2020-12-25 13:00

python爬取豆瓣影评生成词云的课程设计报告_Python爬取豆瓣影评，生成词云图，只要简单一步即可实现。...

用jieba分词，对词语的出现频率进行统计，再通过wordcloud生成词云图。今天和小伙伴们一起梳理下具体实现的流程，具体源代码已经上传到NLP小白公众号中，发送“词云图”，即可获取源代码。
weixin_39622150·2020-12-17 23:41

python中jieba库的作用_Python jieba库用法及实例解析

、jieba库概述jieba是优秀的中文分词第三方库-中文文本需要通过分词获得单个的词语-jieba是优秀的中文分词第三方库，需要额外安装-jieba库提供三种分词模式，最简单只需掌握一个函数(2)、jieba
weixin_39919165·2020-12-12 14:44

NLP 学习 - 3分类问题命名实体识别

NLP中的分类问题2020年9月4日一、分词算法Jieba分词http://github.com/fxsjy/jiebaSnowNLPhttps://github.com/isnowfy/snownlpLTP
遇见Miu·2020-12-11 16:37

超级详细使用jieba分词用wordcloud制作词云并进行词频统计实例

准备工作使用命令安装jieba分词，这里已经帮大家写好了阿里云的镜像复制使用即可。
microspore·2020-12-10 23:36

python人物关系可视化_文本可视化[二]——《今生今世》人物关系可视化python实现...

文本可视化[二]——《今生今世》人物关系可视化python实现在jieba分词和wordcloud实现了，文本关键词的提取并生成词云，同时也尝试直接提取人名关键词来绘制。
weixin_39847556·2020-12-03 13:56

Python实战案例:金庸的功夫流派、人物关系的分析案例（下）

现在爬取的小说正文已准备就绪，可以通过jieba分词的自定义词典把小说中的人物加载，load_userdict方法可以帮助我们
play_big_knife·2020-12-01 22:57

豆瓣TOP250爬虫，数据分析项目实战——pyecharts

1.先导入所有模块这里我们用pyecharts来数据可视化，pd做数据清洗，jieba分词，
高中不复，大学纷飞·2020-11-25 11:01

玩转词云图，推荐一个Pyecharts和Plotly数据分析实战项目

APP的数据，用来进行数据分析、处理和可视化图形的制作，主要包含内容：数据的多种处理操作基于pyecharts和plotly的饼图和柱状图制作基于Wordcloud和pyecharts的词云图制作利用jieba
Python数据之道·2020-09-27 09:00

Python分布式系统Celery，根据CPU核数探讨最优worker数 《案例：jieba分词玩家热点追踪》

一、服务器背景1台4核服务器二、jieba分词问题探究在本例中，主要针对的是对玩家每天的聊天记录进行一个热点追踪，技术层面不难，无非就是对玩家的语句进行清洗，分词，然后做主题提取等一些常规的流程。
一只前进的蚂蚁·2020-09-17 12:40

jieba分词

详情https://blog.csdn.net/ebzxw/article/details/80304761安装pipinstalljieba
i0208·2020-09-17 10:26

python 将爬取的淘宝数据，用云图展示（利用jieba分词库提取数据）

一、jieba库基本介绍1、jieba库概述jieba是优秀的中文分词第三方库-中文文本需要通过分词获得单个的词语-jieba是优秀的中文分词第三方库，需要额外安装-jieba库提供三种分词模式，最简单只需掌握一个函数想要数据的可以留言。。下面是爬取的数据，用云图展示的代码importcsvimportjiebafrompyechartsimportWordCloudnameva={}name=[
max_mei·2020-09-17 05:04

基于Python的中英文分词基础：正则表达式和jieba分词器

基于Python的中英文分词基础：正则表达式和jieba分词器前言介绍英文字符串处理Python中的str正则表达式Python中的正则表达式模块re小练习字符串中出现频次最多的字母统计字符出现的频率中文字符串处理
Gamelife27·2020-09-17 03:21

基于scikit-learn(sklearn)做分类--1.切词

1、切词首先是拿到文本进行切词，使用的是jieba分词，不过可以自己导入自定义词典。
初夏11·2020-09-16 23:55

jieba分词、训练词向量

importjiebaimportnumpyasnpfilePath='EmotionClassficationTest.xml'fileSegWordDonePath='EmotionClassficationTest_1.txt'#打印中文列表defPrintListChinese(list):foriinrange(len(list)):print(list[i])#读取文件内容到列表fil
lalala_liufan·2020-09-16 23:38

自然语言处理之中文文本分析（jieba分词、词袋doc2bow、TFIDF文本挖掘）

中文分词常用的分词工具有jieba等，本文以jieba分词为例，讲解中文文本分析。
a flying bird·2020-09-15 02:11

简易中文自动文摘系统（合集）

目录简易中文自动文摘系统（一）：绪论自动文摘的介绍自动文摘分类简易中文自动文摘系统（二）：中文语料库的准备中文语料库jieba分词简易中文自动文摘系统（三）：模型训练词向量word2vec与自然语言模型模型训练简易中文自动文摘系统
安藤青司·2020-09-15 01:44

jieba分词java版项目使用方法

jieba分词java版项目下载地址：http://download.csdn.net/download/u012483103/10245843。
sinkpuer·2020-09-14 20:04

python 共现矩阵的实现

2.项目背景本人利用爬虫获取各大博客网站的文章，在进行jieba分词，得到每篇文章的关键词，对这些关键词进行共现矩阵的可视化。
Dragon水魅·2020-09-14 20:52

jieba简易教程：分词、词性标注、关键词抽取

jieba分词“Jieba”(Chinesefor“tostutter”)Chinesetextsegmentation:builttobethebestPythonChinesewordsegmentationmodule
Mr.Jk.Zhang·2020-09-14 19:43

jieba分词使用方法

“结巴”中文分词：最好的Python中文分词组件特点：支持三种分词模式：精确模式，试图将句子最精确地切开，适合文本分析；全模式，把句子中所有的可以成词的词语都扫描出来,速度非常快，但是不能解决歧义；搜索引擎模式，在精确模式的基础上，对长词再次切分，提高召回率，适合用于搜索引擎分词。支持繁体分词支持自定义词典MIT授权协议安装说明：代码对Python2/3均兼容全自动安装：easy_installj
小白的进阶·2020-09-14 19:27

jieba分词快速入门 自然语言处理

jieba"结巴"中文分词：做最好的Python中文分词组件"Jieba"Feature支持三种分词模式：精确模式，试图将句子最精确地切开，适合文本分析；全模式，把句子中所有的可以成词的词语都扫描出来,速度非常快，但是不能解决歧义；搜索引擎模式，在精确模式的基础上，对长词再次切分，提高召回率，适合用于搜索引擎分词。支持繁体分词支持自定义词典在线演示http://jiebademo.ap01.aws
瑟瑟发抖的菜鸡望·2020-09-14 17:20

自然语言处理（NLP）相关

ヾ(◍°∇°◍)ﾉﾞ-参考结巴分词使用中文分词之结巴分词~~~附使用场景+demo（net）jieba分词、自定义词典提取高频词、词性标注及获取词的位置jieba分词增加自定义词表词性标注[python
致Great·2020-09-14 01:18

python中文文本分类

这是来自一个菜鸟的总结前言除去非中文部分中文分词读取文档并且去除非中文部分，在利用jieba分词处理引用停用词进行向量化，TF-IDF和标准化K-means算法聚类优化main（）函数总体test.py
重邮小瓜皮·2020-09-14 00:41

python3使用fasttext进行中文文本分类

期间使用了jieba分词。数据集本文使用skdjfla在github上的头条新闻数据集.包括新闻数据382688条(只包含标题),共15个类别。
leeber_94·2020-09-14 00:06

python日期识别

识别的结果受jieba分词的影响，如果想要效果更好，可以自己用HMM训练分词，用双向匹配分词，条件随机场，神经网络等根据自己的需求训练自己的分词。#
zx520113·2020-09-13 04:22

自动提取文章摘要AutoSummary

在自动摘要提取过程中，使用了一个分词库：CppJieba分词库。因此在头文件中包含了头文件“Application.hpp”。思路：1、对文章提取关键字。通常，关键字能够代表这篇文章的所描述的内容。
MA201506·2020-09-13 01:12

TF-IDF算法提取文章的关键词

初学中文文本分词，从最简单的TF-IDF算法入手，理解其中的逻辑结构，其中使用jieba分词包作为分词模型。这里部分内容参考了_hahaha的博客。
kevinQt·2020-09-12 18:52

python环境jieba分词

对于中文分词，有jieba和hanlp两种包，但是hanlp需要java环境，而对于我的关键词提取需求，jieba已然足够，所以我采用了jieba.首先安装：pipinstalljieba几种分词方法#encoding=utf-8importjiebaseg_list=jieba.cut("我来到北京清华大学",cut_all=True)print("FullMode:"+"/".join(seg
猫不吃老鼠·2020-09-12 16:33

Python使用jieba分词并用weka进行文本分类

一、安装pycharm二、安装Python三、在Python下安装pip，如下图所示，pip安装成功四、在python下安装jieba：如下图所示，jieba安装成功：五、在pycharm中新建Python项目，对test.txt文件中的中文进行分词，并写入testResult.txt文件中，具体代码如下：#!/usr/bin/envPython#coding=utf-8importjieba.a
一颗青春痘·2020-09-12 13:46

中文文本分析相关资源汇总

中文文本数据逻辑性分析库中文文本数据(挖掘)分析相关资源汇总一、Python中文数据处理库项目地址简介jieba分词https://github.com/fxsjy/jieba中文分词库中文复杂事件的概念与显式模式
邓旭东HIT·2020-09-11 20:10

jieba分词

jieba分词有三种模式：全模式、精确模式、搜索引擎模式。全模式和精确模式通过jieba.cut实现，搜索引擎模式对应cut_for_search，且三者均可以通过参数HMM决定是否使用新词识别功能。
happy_wealthy·2020-09-11 01:42

NLP学习笔记-循环神经网络RNN、情感分类、LSTM（二）

常见的分词工具很多，比如：jieba分词：https://github.com/fxsjy/jieba清华大学的分词工具THULAC：https://github.com/thunlp/THULAC-Python1.2
阁下和不同风起·2020-09-09 23:05

python爬取B站视频弹幕分析并制作词云

目录1.分析网页2.爬虫+jieba分词+制作词云2.1爬虫2.2jieba分词2.3制作词云3.成品展示4.完整代码1.分析网页视频地址：https://www.bilibili.com/video/
萌萌哒的瓤瓤·2020-08-26 23:00

Python个人快速入门学习（九）jieba库的使用

九、jieba库的使用1.jieba库：优秀的中文分词第三方库-中文文本需要通过分词获得单个的词语-jieba是第三方库，需要额外安装：-pipinstalljieba2.jieba分词的原理-利用了一个中文词库
CC_且听风吟·2020-08-26 15:03

jieba分词（添加分词词典）

为了分词效果更好，可以自己建立分词词典加入到jieba词典中：jieba.load_userdict（）（）内为分词词典路径+名称。写一个分词的小函数：importjiebadefpreprocess(path):text=""fenci=open(path,"r",encoding="utf-8").read()jieba.load_userdict("C:/Users/idmin/Deskto
Chz9523·2020-08-26 15:41
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他