[中文分词]

Elasticsearch 2.3.5示例代码

系统环境：系统：windows1064位JDK：1.7.0_80开发工具：EclipseLuna4.4搜索引擎：Elasticsearch2.3.5IK中文分词器：1.9.5Node.js：node-v10.14.2
荒--·2020-08-20 18:30

Elasticsearch笔记六之中文分词器及自定义分词器

中文分词器在lunix下执行下列命令，可以看到本来应该按照中文”北京大学”来查询结果es将其分拆为”北”,”京”,”大”,”学”四个汉字，这显然不符合我的预期。
臭小优·2020-08-20 18:12

elasticsearch插件开发--概述

常见的插件，有中文分词、hdfs数据备份还原、云平台自动发现(ec2,gce,azure)等。es的收费模块xpack也是基于插件机制
P_Chou水冗·2020-08-20 17:21

elasticsearch插件开发--概述

常见的插件，有中文分词、hdfs数据备份还原、云平台自动发现(ec2,gce,azure)等。es的收费模块xpack也是基于插件机制
P_Chou水冗·2020-08-20 17:20

Elasticsearch系列——安装中文分词插件elasticsearch-analysis-ik

前言系统：Windows10elasticsearch版本：5.6.6中文分词版本：5.6.6（需要与elasticsearch版本匹配）maven版本：3.5.5安装step1官网下载合适的版本下载页面地
前方一片光明·2020-08-20 17:56

如何才能更懂中文？

LAC可实现中文分词、词性标注、专名识别等功能，帮助你更懂中文！
百度NLP·2020-08-20 17:31

如何才能更懂中文？

LAC可实现中文分词、词性标注、专名识别等功能，帮助你更懂中文！
百度NLP·2020-08-20 17:31

elasticsearch(4)安装hanlp中文分词插件

为了做基于分词和基于模板的智能客服系统，引入了hanlp分词器，直接整：hanlp分词是针对中文分词开发的分词库。
qq_20064245·2020-08-20 17:05

Elasticsearch + IK 中文分词插件在文档中心项目中的使用

前言既然是文档中心，对于前台用户而言除了基本的文档阅览功能之外，最重要的功能莫过于根据关键词搜索文档了。那么这一点无论是对于英文还是中文，其本质其实都是全文搜索，只不过针对中文需要做一些额外处理。Elasticsearch简介全文搜索属于最常见的需求，开源的Elasticsearch是目前全文搜索引擎的首选。它可以快速地存储、搜索和分析海量数据。维基百科、StackOverflow、Github都
NoTryNoSuccess·2020-08-20 16:14

Elasticsearch + IK 中文分词插件在文档中心项目中的使用

前言既然是文档中心，对于前台用户而言除了基本的文档阅览功能之外，最重要的功能莫过于根据关键词搜索文档了。那么这一点无论是对于英文还是中文，其本质其实都是全文搜索，只不过针对中文需要做一些额外处理。Elasticsearch简介全文搜索属于最常见的需求，开源的Elasticsearch是目前全文搜索引擎的首选。它可以快速地存储、搜索和分析海量数据。维基百科、StackOverflow、Github都
NoTryNoSuccess·2020-08-20 16:13

Elasticsearch系列（四）--安装中文分词器

一、下载中文分词器https://github.com/medcl/elasticsearch-analysis-ik1、下载：elasticsearch-analysis-ik-master.zip2
飞奔的蜗牛2017·2020-08-20 16:41

如何在基于Lucene的中文分词器中添加自定义词典（如Paoding、mmseg4j、IK Analyzer）...

如何在基于Lucene的中文分词器中添加自定义词典（如Paoding、mmseg4j、IKAnalyzer）2013-07-0821:54:29|分类：计算机|字号订阅1.使用Paoding自定义词典参考文章
Rayping·2020-08-20 16:51

Elasticsearch集成IK中文分词器

一、安装ik分词器IK分词器Github地址：https://github.com/medcl/elas...因为我安装的Elasticsearch是5.6.9版本，所以对应安装elasticsearch-analysis-ik-5.6.9版本$./bin/elasticsearch-plugininstallhttps://github.com/medcl/elasticsearch-analy
Developer·2020-08-20 16:02

Elasticsearch集成IK中文分词器

一、安装ik分词器IK分词器Github地址：https://github.com/medcl/elas...因为我安装的Elasticsearch是5.6.9版本，所以对应安装elasticsearch-analysis-ik-5.6.9版本$./bin/elasticsearch-plugininstallhttps://github.com/medcl/elasticsearch-analy
Developer·2020-08-20 16:02

推荐十款java开源中文分词组件

1：Elasticsearch的开源中文分词器IKAnalysis(Star:2471)IK中文分词器在Elasticsearch上的使用。
hguchen·2020-08-20 16:22

推荐十款java开源中文分词组件

1：Elasticsearch的开源中文分词器IKAnalysis(Star:2471)IK中文分词器在Elasticsearch上的使用。
hguchen·2020-08-20 16:22

结巴中文分词之PHP扩展

https://github.com/jonnywang/...functionsarrayjieba(string$text,booluse_extract=false,longextract_limit=10)installgitclonehttps://github.com/jonnywang/phpjieba.gitcdphpjieba/cjiebamakecd..phpize./conf
xingqiba·2020-08-20 16:20

结巴中文分词之PHP扩展

https://github.com/jonnywang/...functionsarrayjieba(string$text,booluse_extract=false,longextract_limit=10)installgitclonehttps://github.com/jonnywang/phpjieba.gitcdphpjieba/cjiebamakecd..phpize./conf
xingqiba·2020-08-20 16:20

使用cjieba(结巴分词库)实现php扩展中文分词

编译安装gitclonehttps://github.com/jonnywang/jz.gitcdjz/cjiebamakecd..phpize./configure--enable-jiebamakemakeinstall配置php.iniextension=jz.sojz.enable_jieba=1jz.dict_path=/Users/xingqiba/data/softs/jz/cjie
xingqiba·2020-08-20 16:19

使用cjieba(结巴分词库)实现php扩展中文分词

编译安装gitclonehttps://github.com/jonnywang/jz.gitcdjz/cjiebamakecd..phpize./configure--enable-jiebamakemakeinstall配置php.iniextension=jz.sojz.enable_jieba=1jz.dict_path=/Users/xingqiba/data/softs/jz/cjie
xingqiba·2020-08-20 16:19

Elasticsearch系列---使用中文分词器

前言前面的案例使用standard、english分词器，是英文原生的分词器，对中文分词支持不太好。
qq_38473097·2020-08-20 14:36

文本挖掘（一）—— 新词发现2

基于词典和AC自动机的快速分词优缺点：便于维护，容易适应领域《新词发现的信息熵方法与实现》算法介绍：https://spaces.ac.cn/archives/3491原理：频数、凝固度、自由度；《【中文分词系列
微知girl·2020-08-20 13:00

利用jieba和wordcloud生成词云

python2对jieba的中文分词支持不是很好，所以使用python3。
sunlanchang·2020-08-20 08:05

Jcseg分词器中英文混合词保留完整分词

Jcseg是基于mmseg算法的一个轻量级中文分词器，同时集成了关键字提取，关键短语提取，关键句子提取和文章自动摘要等功能，并且提供了一个基于Jetty的web服务器，方便各大语言直接http调用，同时提供了最新版本的
pandalovey·2020-08-20 07:48

利用wordcloud包，画词云图（Python学习实例一）

输入：1、所需画成词云图的文本数据2、词云图轮廓所需的图片输出：1、满足要求的词云图片二、代码详情1、使用到的第三方包wordcloud：绘制词云图的第三方包jieba：中文分词包PIL：图片读取第三方包
keith0812·2020-08-20 06:33

Python_制作中文词云

准备工作：安装jieba中文分词工具安装wordcloud词云生成工具下载地址：https://www.lfd.uci.edu/~gohlke/pythonlibs/在命令行执行：pipinstallname.whl
FireMicrocosm·2020-08-20 06:17

第3课：简单好用的中文分词利器 jieba 和 HanLP

首先，我们按照中文自然语言处理流程的第一步获取语料，然后重点进行中文分词的学习。
一纸繁鸢w·2020-08-20 04:52

Jieba分词Python简单实现

>>>上一章分享了IKAnalyzer中文分词及词频统计基于Hadoop的MapReducer框架Java实现。
weixin_33845477·2020-08-19 23:30

用python实现前向分词最大匹配算法

前向分词最大匹配算法理论介绍前向最大匹配算法具体代码实现分词结果理论介绍分词是自然语言处理的一个基本工作，中文分词和英文不同，字词之间没有空格。
ywsydwsbn·2020-08-19 23:59

Python利用结巴模块统计《水浒传》词频

中文分词是中文文本处理的一个基础性工作，结巴分词利用进行中文分词。
Reacubeth·2020-08-19 22:36

【Python自然语言处理】中文分词技术——规则分词

中文分词方法本文参考自书籍《Python自然语言处理实战：核心技术与算法》用做个人的学习笔记和分享1.规则分词规则分词是一种机械分词方法，主要通过维护词典，在切分语句时将语句的每个字符串和词表中的词逐一匹配找到则切分
XD1998·2020-08-19 22:52

用python 写一个中文分词器

在不用第三方库的情况下，用python写一个分词器需要先有一个本地词典才能进行分词importreimportosos.chdir('d:\workpath')##将jieba分词的词典变为自己的词典#f=open('dict.txt','r+',encoding="utf-8")#g=open('dic.txt','w+',encoding='UTF-8')#f=f.readlines()#fo
PeterHeinz·2020-08-19 22:08

自然语言处理爬过的坑：使用python结巴对中文分词并且进行过滤，建立停用词。常见的中文停用词表大全

原代码：defnatural_language_processing(self,response):#对所抓取的预料进行自然语言处理title=response.meta['title']#printtitlecontent=response.meta['content']#printcontentraw_documents=[]raw_documents.append(title)raw_doc
腾阳·2020-08-19 21:19

Python实现中文分词--正向最大匹配和逆向最大匹配

编译原理实验二：Python实现中文分词–正向最大匹配和逆向最大匹配最大匹配法：最大匹配是指以词典为依据，取词典中最长单词为第一个次取字数量的扫描串，在词典中进行扫描（为提升扫描效率，还可以跟据字数多少设计多个字典
starlet_kiss·2020-08-19 20:28

Python jieba中文分词的使用

Pythonjieba中文分词的使用使用jieba分词来实现《本草纲目》里面常用药材。
Linux.python·2020-08-19 19:53

Python中文分词工具大合集：安装、使用和测试

转自：AINLP这篇文章事实上整合了之前文章的相关介绍，同时添加一些其他的Python中文分词相关资源，甚至非Python的中文分词工具，仅供参考。
AI蜗牛车·2020-08-19 19:11

python 中文分词工具

python中文分词工具jieba，https://github.com/fxsjy/jiebajieba_fast，https://github.com/deepcs233/jieba_fastnltk
三个石头2016·2020-08-19 18:34

计词unigram和bigram的频次

其中，有关中文分词的一些概念是我们需要掌握的，譬如：unigram一元分词，把句子分成一个一个的汉字bigram二元分词，把句子从头到尾每两个字组成一个词语trigram三元分词，把句子从头到尾每三个字组成一个词语
niuox·2020-08-19 18:58

中文分词基础原则及正向最大匹配法、逆向最大匹配法、双向最大匹配法的分析

分词算法设计中的几个基本原则：1、颗粒度越大越好：用于进行语义分析的文本分词，要求分词结果的颗粒度越大，即单词的字数越多，所能表示的含义越确切，如：“公安局长”可以分为“公安局长”、“公安局长”、“公安局长”都算对，但是要用于语义分析，则“公安局长”的分词结果最好（当然前提是所使用的词典中有这个词）2、切分结果中非词典词越少越好，单字字典词数越少越好，这里的“非词典词”就是不包含在词典中的单字，而
Ju_Sang·2020-08-19 18:47

使用最大逆向法，利用python进行简易中文分词

首先进行分词所需要的基本设置就是“词库”，而网上开源的词库有很多，例如github里面的chinese词库和清华大学开源中文词库，这些都是免费下载开源的。而且下载及其简单，所以你在网页可以直接下载，若是你已经学过爬虫，也可以进行爬下来。在这里我只下载类清华大学的food词库，这个程序也只能匹配水果食物等的专有名词。以下是程序#!/usr/bin/envpython#-*-coding:utf-8-
hea_gui_lion·2020-08-19 17:42

python实现机械分词之逆向最大匹配算法代码示例

逆向最大匹配方法有正即有负，正向最大匹配算法大家可以参阅：python中文分词教程之前向最大正向匹配算法详解逆向最大匹配分词是中文分词基本算法之一，因为是机械切分，所以它也有分词速度快的优点，且逆向最大匹配分词比起正向最大匹配分词更符合人们的语言习惯
程序员吉塔·2020-08-19 17:40

数学之美在google中文黑板报的原文

数学之美系列一--统计语言模型数学之美系列二--谈谈中文分词数学之美系列三--隐含马尔可夫模型在语言处理中的应用数学之美系列四--怎样度量信息?
囧雪啥都不知道·2020-08-19 17:47

Python | 中文分词总结

一，Jieba对于结巴而言，使用的人比较多，支持三种分词模式，繁体分词，自定义词典，MIT授权协议。三种模式分词importjiebas_list=jieba.cut("江南小镇的青砖白瓦风景秀美如画",cut_all=True)print("FullMode:"+"".join(s_list))#全模式s_list=jieba.cut("江南小镇的青砖白瓦风景秀美如画",cut_all=Fals
ZDJ_csdn·2020-08-19 16:03

Python 结巴分词——自然语言处理之中文分词器

jieba分词算法使用了基于前缀词典实现高效的词图扫描，生成句子中汉字所有可能生成词情况所构成的有向无环图(DAG),再采用了动态规划查找最大概率路径，找出基于词频的最大切分组合，对于未登录词，采用了基于汉字成词能力的HMM模型，使用了Viterbi算法。jieba分词支持三种分词模式：1.精确模式,试图将句子最精确地切开，适合文本分析：2.全模式，把句子中所有的可以成词的词语都扫描出来，速度非常
Xylon_·2020-08-19 16:58

中文分词（python）

今天研究了一下中文分词，下面用两种简单的算法（正向最大匹配分词算法和逆向最大匹配分词算法）实现。
Gravitas·2020-08-19 16:31

Lucene Solr 811

luke查看文档指定分词器,并测试分词查询测试从索引查询solr安装把solr-8.1.1.tgz传到服务器解压solr启动solr浏览器访问solr控制台创建core复制默认配置创建名为pd的core中文分词测试中文分词工具
Wanght6·2020-08-19 16:29

python基础编程：python中文分词教程之前向最大正向匹配算法详解

中文分词是中文文本处理的一个基础性工作，然而长久以来，在Python编程领域，一直缺少高准确率、高效率的分词组件。
程序员吉塔·2020-08-19 15:27

28_多易教育之《yiee数据运营系统》附录：扩展知识点汇总系列一

目录一、日志工具log4j二、高德地图服务1、导论2、高德地图服务申请3、高德地图服务API三、HanLP中文分词四、hive多重插入语法五、hive动态分区一、日志工具log4jlog4j是一个java
江湖人称涛哥·2020-08-19 09:32

python中文分词库finalseg

python下的中文分词工具finalseg库。
Daisy09·2020-08-19 07:21

python 结巴分词(jieba)详解

文章转载：http://blog.csdn.net/xiaoxiangzi222/article/details/53483931jieba“结巴”中文分词：做最好的Python中文分词组件"Jieba
weixin_30621711·2020-08-19 04:02
上一页 23 24 25 26 27 28 29 30 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他