中文分词器

lucene创建索引库

org.apache.lucenelucene-core8.0.0org.apache.lucenelucene-queryparser8.0.0org.apache.lucenelucene-analyzers-common8.0.0commons-iocommons-io2.6并导入相应的IK中文分词器的
qq_26710557·2020-07-07 20:27

JavaEE学习日志(一百一十二): lucene详解，ik中文分词器

lucenelucene概述lucene原理lucene使用从数据库中获取数据创建索引库图形化界面查询索引库查询索引删除索引更新索引ik中文分词器域对象的选择lucene概述lucene就是apache
隔叶听风·2020-07-07 00:33

Android版中文分词：原理、接入和启动优化

中文分词功能是一项常用的基础功能，有很多开源的工程实现，目前能应用于Android手机端的中文分词器没有很完善的版本。
weixin_34315189·2020-07-06 01:14

Android版中文分词器：原理、接入和启动优化

Android版中文分词器：原理、接入和启动优化结巴分词的原理接入方式启动速度优化中文分词功能是一项常用的基础功能，有很多开源的工程实现，目前能应用于Android手机端的中文分词器没有很完善的版本。
JackMeGo·2020-07-05 11:13

ElasticSearch教程与实战：从搭建服务到Spring Boot整合

关于Elasticsearch版本的选择Elasticsearch的几个基本概念索引（index）类型（type）文档（document）安装之前的准备工作开始安装Elasticsearch配置IK中文分词器启动
Java开发之旅·2020-07-01 06:04

Lucene4.1 入门级别Demo

首先创建一个简单的java工程创建lib目录并引入jar包其中IKAnalyzer是一个第三方的中文分词器要使用IK分词器还需要在根目录下引入几个文件IKAnalyzer.cfg.xmlIKAnalyzer
第八号灬当铺·2020-07-01 03:35

Linux下ElasticSearch6.4.x、ElasticSearch-Head、Kibana以及中文分词器IK的安装配置

ElasticSearch安装配置下载#官网下载压缩包[root@localhost/home]# wgethttps://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.4.2.tar.gz#解压[root@localhost/home]# tar-zxvfelasticsearch-6.4.2.tar.gz启动：[roo
ZHU_WD·2020-06-30 17:19

ElasticSearch系列五：掌握ES使用IK中文分词器

一、内置分词器的介绍例：Settheshapetosemi-transparentbycallingset_trans(5)standardanalyzer（默认）：set,the,shape,to,semi,transparent,by,calling,set_trans,5simpleanalyzer：set,the,shape,to,semi,transparent,by,calling,s
带你去学习·2020-06-30 16:31

elasticsearch之全文搜索

②先下载与项目中es版本对应的ik中文分词器，ht
老张家的独苗·2020-06-30 14:43

es安装IK中文分词器

没有中文分词器，我们使用es的时候会觉得乐趣少了很多，同时在业务中也有很多不方便的地方，es中对于字符串的默认内置分词是standard类型的，但是这对于中文来说就无能为力了，下面简单介绍一下es中怎么安装
小码农叔叔·2020-06-30 13:07

ElasticSearch 之中文分词器

4，中文分词器4.1.smartCN（这个是参照别人的安装方法安装的有兴趣可以试一下）一个简单的中文或中英文混合文本的分词器这个插件提供smartcnanalyzer和smartcn_tokenizertokenizer
ywl470812087·2020-06-30 11:52

ES7学习笔记（七）IK中文分词器

在上一节中，我们给大家介绍了ES的分析器，我相信大家对ES的全文搜索已经有了深刻的印象。分析器包含3个部分：字符过滤器、分词器、分词过滤器。在上一节的例子，大家发现了，都是英文的例子，是吧？因为ES是外国人写的嘛，中国如果要在这方面赶上来，还是需要屏幕前的小伙伴们的~英文呢，我们可以按照空格将一句话、一篇文章进行分词，然后对分词进行过滤，最后留下有意义的词。但是中文怎么分呢？中文的一句话是没有空格
牛初九·2020-06-30 08:17

SpringBoot2.x集成Elasticsearch6.4.2

/article/details/83792552SpringBoot2.x集成Elasticsearch6.4.21、配置JDK环境变量2、Linux安装ElasticSearch6.4.23、安装中文分词器
征尘bjajmd·2020-06-30 05:45

Java中文NLP工具汇总

首先声明，本文介绍的所有工具也可参考下文：Java开源项目cws_evaluation：中文分词器分词效果评估对比文中比较了10个中文分词工具，比较了他们主要性能。
xutiantian1412·2020-06-30 04:56

Elasticsearch（七）安装中文分词器

分词组件elasticsearch提供了几个内置的分词器：standardanalyzer(标准分词器)、simpleanalyzer(简单分词器)、whitespaceanalyzer（空格分词器）、languageanalyzer（语言分词器），而如果我们不指定分词器类型的话，elasticsearch默认是使用标准分词器的。那接下来我们先来看看这几种分词器的特点。ps：我们可以通过分词器测试
wolfcode_cn·2020-06-29 20:13

Elasticsearch中文分词器(elasticsearch-analysis-ik)

中文分词器下载链接:https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v6.3.0/elasticsearch-analysis-ik
漫路h·2020-06-29 12:12

Python深度学习自然语言处理工具Stanza试用！这也太强大了吧！

几年前我曾基于斯坦福Java工具包和NLTK写过一个简单的中文分词接口：Python自然语言处理实践:在NLTK中使用斯坦福中文分词器，不过用起来也不是很方便。
爬遍天下无敌手·2020-06-29 10:24

solr搭建电商搜索引擎05 - 中文分词器的配置

如果没有中文分词器，solr就只能按照整句话或者单个字进行索引，这样不但效率低，而且也会影响搜索结果
sul818·2020-06-29 02:00

Elasticsearch 7.6 分词器使用

1.创建索引1.1使用ik分词器适用于中文分词器,若是对邮箱/用户名等进行分词,只能按着标点符号进行分割,颗粒度太大,不太适用,这种情况可以考虑下面的自定义分词器{"settings":{"number_of_shards
RanGe*·2020-06-29 01:39

Elasticsearch之中文分词器

Elasticsearch之分词器的作用Elasticsearch之分词器的工作流程Elasticsearch之停用词Elasticsearch的中文分词器1、单字分词：如：“我们是中国人”效果：“我”
weixin_34232744·2020-06-28 14:04

Elasticsearch查询和聚合基本语法

本文主要介绍结构化查询的query，filter，aggregate的使用，本文使用的ES版本为6.5.4，中文分词器使用的ik，安装和使用可以参考：Elasticsearch安装和使用Elasticsearch
weixin_34224941·2020-06-28 14:31

elasticsearch ik中文分词器的使用详解

2019独角兽企业重金招聘Python工程师标准>>>复习一下常用的操作1.查看集群健康状况GET/_cat/health?v&pretty2.查看my_index的mapping和setting的相关信息GET/my_index?pretty3.查看所有的indexGET/_cat/indices?v&pretty4.删除my_index_newDELETE/my_index_new?prett
weixin_33725126·2020-06-28 04:09

ES-自然语言处理之中文分词器

前言中文分词是中文文本处理的一个基础步骤，也是中文人机自然语言交互的基础模块。不同于英文的是，中文句子中没有词的界限，因此在进行中文自然语言处理时，通常需要先进行分词，分词效果将直接影响词性、句法树等模块的效果。当然分词只是一个工具，场景不同，要求也不同。在人机自然语言交互中，成熟的中文分词算法能够达到更好的自然语言处理效果，帮助计算机理解复杂的中文语言。根据中文分词实现的原理和特点，可以分为：基
weixin_30765505·2020-06-28 00:09

Lucene全文搜索之分词器：使用IK Analyzer中文分词器（修改IK Analyzer源码使其支持lucene5.5.x）...

注意：基于lucene5.5.x版本一、简单介绍下IKAnalyzerIKAnalyzer是linliangyi2007的作品，再此表示感谢，他的博客地址：http://linliangyi2007.iteye.com/IKAnalyzer支持两种分词，一种是最细粒度分词（推荐使用，Ik默认采用最细粒度），还有一种的智能分词（测试了一下智能分词还没有lucene自带的分词准确，呵呵了）。二、IKA
weixin_30478619·2020-06-27 20:15

solr5.3.1 集成IK中文分词器

1.下载IK分词器包。链接：http://pan.baidu.com/s/1i4D0fZJ密码：bcen2.解压并把IKAnalyzer5.3.1.jar、IK-Analyzer-extra-5.3.1.jar拷贝到tomcat/webapps/solr/WEB-INF/lib下。3.修改schema.xml配置文件，如下：修改后的配置文件1234567891011id12131415161718
weixin_30394333·2020-06-27 19:27

elasticsearch使用中文分词器和拼音分词器，自定义分词器

elasticsearch使用中文分词器和拼音分词器，自定义分词器1.到github下载分词器上面有已经编译好打好的包。
alwaysBrother·2020-06-27 05:32

Solr安装与IK Analyzer(中文分词器)

一、Solr简介二、solr安装三、solr基础四、IKAnalyzer(中文分词器)一、Solr简介Solr是Apache下的一个顶级开源项目，采用Java开发，它是基于Lucene的全文搜索服务器。
Mr_蜗牛·2020-06-26 22:27

ElasticSearch ik分词器扩充词库遇到的坑

博主使用了ik分词器作为搜索服务中文分词器。ik分词器支持扩充词库，具体方法这里不提，大家自行google。这里记录在扩充词库后大家容易遇到的坑，因为我就遇到了。
爱写代码的汤二狗·2020-06-26 22:19

Solr搜索引擎第九篇-DataImportHadler导入MySQL数据超详细

文章目录了解IndexHandler通过DIH导入Mysql数据步骤一：准备mysql数据库和表数据步骤二：拷贝mysql的驱动jar步骤三：在solrconfig.xml配置DIH步骤四：集成中文分词器
达龙猫·2020-06-26 16:21

jcseg中文分词器去除不想要的分词

今天观察我的网站[url="http://www.savetao.com"]省淘网[/url]时，发现好多相关搜索结果，都是关键词“的”的命中。一开始想自己把字符串里的“的”replace掉得了，但是一想，jcseg应该有这个功能吧。翻阅了说明文档后，最终发现，默认的配置文件没有开启自动过滤停止词（其实就是去掉不想要的分词）具体设置：默认的配置文件在jcseg-core-1.9.1.jar包里：j
sunseed·2020-06-26 16:13

全文检索之lucene的优化篇--分词器

在创建索引库的基础上，加上中文分词器的，更好的支持中文的查询。引入jar包je-analysis-1.5.3.jar,极易分词.还是先看目录。
舒琪·2020-06-26 10:45

Elasticsearch顶尖高手系列：高手进阶篇

高手进阶篇》中，我们将会更加深入地学习各种高阶的技术：1、在“深度探秘搜索技术”中，我们非常深入、系统而且细致地剖析和实战演练了各种高阶的搜索技术；2、在“彻底掌握IK中文分词”中，我们全面演示了如何基于IK中文分词器来构造一个中文搜索引擎
shun35·2020-06-26 10:14

ElasticSearch搜索引擎在JavaWeb项目中的应用

ElasticSearch系列：1、阿里云服务器Linux系统安装配置ElasticSearch搜索引擎2、Linux系统中ElasticSearch搜索引擎安装配置Head插件3、ElasticSearch搜索引擎安装配置中文分词器
Jalon_Y·2020-06-25 15:41

从零学Elasticsearch系列——环境搭建

基本的操作从零学Elasticsearch系列——深入搜索（Query、Filter、Aggregation）从零学Elasticsearch系列——JAVAAPI操作从零学Elasticsearch系列——集成中文分词器
高志遠·2020-06-25 05:37

从零学Elasticsearch系列——搭建ELK Nginx日志分析平台

基本的操作从零学Elasticsearch系列——深入搜索（Query、Filter、Aggregation）从零学Elasticsearch系列——JAVAAPI操作从零学Elasticsearch系列——集成中文分词器
高志遠·2020-06-25 05:37

从零学Elasticsearch系列——集成中文分词器IK

基本的操作从零学Elasticsearch系列——深入搜索（Query、Filter、Aggregation）从零学Elasticsearch系列——JAVAAPI操作从零学Elasticsearch系列——集成中文分词器
高志遠·2020-06-25 05:06

从零学Elasticsearch系列——JAVA API操作

基本的操作从零学Elasticsearch系列——深入搜索（Query、Filter、Aggregation）从零学Elasticsearch系列——JAVAAPI操作从零学Elasticsearch系列——集成中文分词器
高志遠·2020-06-25 05:06

从零学Elasticsearch系列——基础概念

基本的操作从零学Elasticsearch系列——深入搜索（Query、Filter、Aggregation）从零学Elasticsearch系列——JAVAAPI操作从零学Elasticsearch系列——集成中文分词器
高志遠·2020-06-25 05:06

从零学Elasticsearch系列——构建ES集群

基本的操作从零学Elasticsearch系列——深入搜索（Query、Filter、Aggregation）从零学Elasticsearch系列——JAVAAPI操作从零学Elasticsearch系列——集成中文分词器
高志遠·2020-06-25 05:06

从零学Elasticsearch系列——深入搜索（Query、Filter、Aggregation）

基本的操作从零学Elasticsearch系列——深入搜索（Query、Filter、Aggregation）从零学Elasticsearch系列——JAVAAPI操作从零学Elasticsearch系列——集成中文分词器
高志遠·2020-06-25 05:06

elasticsearch安装中文分词器jieba踩坑小记

Elasticsearch结巴分词插件的官方地址为https://github.com/sing1ee/elasticsearch-jieba-pluginlz安装的es版本是7.6.1，所以这边下载了v7.4.2的版本，下载完成之后，使用gradle命令生成jar包使用。（具体操作网上一堆就不赘述了）。lz遇到的问题是，在启动es的时候，出现了路径找不到的问题。很多文章只写了解压jieba分词器
三岁小跟班·2020-06-25 05:50

elasticsearch安装中文分词(ik)与添加自定义词库

es的分词对中文不友好，要中文分词器插件，安装ik服务(记得改好版本号).
名明鸣冥·2020-06-24 14:32

Docker部署单点ElasticSearch（ES）、中文分词器以及可视化插件elasticsearch-head、kibana

最近刚研究ES,就记录一下基本环境的配置，有时间再搭建一套集群环境，这里用到的版本统一为6.8.2，现在网上es7+了，因为是学习使用不必追求最新的版本，学习资料更新要慢一些，新特性用不到，从简单入手，当然也不想太古老，综合各方考虑就挑了这个版本的。镜像准备先将镜像pull下来，所有用的的镜像，如下：dockerpulldocker.elastic.co/elasticsearch/elastic
junehappylove·2020-06-23 23:17

Elasticsearch 中文分词器 IK 配置和使用

Elasticsearch内置的分词器对中文不友好，会把中文分成单个字来进行全文检索，不能达到想要的结果看一个例子curl-XGET'http://localhost:9200/_analyze?pretty&analyzer=standard'-d'第二更新'#返回{"tokens":[{"token":"第","start_offset":1,"end_offset":2,"type":"",
Lionel_Medoo·2020-06-23 23:03

CentOS7下安装Elasticsearch、Kibana、Logstash、Elasticsearch-analysis-ik中文分词器

简介：ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTfulweb接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。环境：javaversion"1.8.0_144"elasticsear
Hi，all·2020-06-23 22:17

nltk-比较中文文档相似度-完整实例

nltk同时也能处理中文的场景，只要做如下改动：使用中文分词器(如我选用了结巴分词)对中文字符做编码处理，使用unicode编码方式python的源码编码统一声明为gbk使用支持中文的语料库代码如下，需要
数据娃掘·2020-06-23 21:03

elasticsearch添加自定义分词器

之前已经成功搭建了elasticsearch然后去模糊搜索的时候，中文会给拆分出来，因为使用的是非中文分词器。效果如下，但是，大家都知道红牛都是平时自己喝的饮料，为啥没有涅~。
画心_sky·2020-06-23 16:16

ELK 7.4.1 安装配置手册之elasticsearch相关插件安装配置

相关插件安装配置安装es插件[root@node01~]#/usr/share/elasticsearch/bin/elasticsearch-plugininstallanalysis-icu安装IK分词器（中文分词器
mason_roy·2020-06-23 11:16

elasticsearch安装并使用中文分词器hanlp

安装1.先下载好zip包https://github.com/KennFalcon/elasticsearch-analysis-hanlp/releases/download/v6.5.4/elasticsearch-analysis-hanlp-6.5.4.zip2.上传到服务器3.执行如下命令安装，其中PATH为插件包绝对路径：./elasticsearch-plugininstallfil
fall_hat·2020-06-23 06:12

Build IKAnalyzer With Solr 5.1.0

中文分詞裡IKAnalyzer和結巴是大家比較常用的分詞器,不過IKAnalyzer已經很久沒有更新了,IKAnalyzer中文分词器V2012使用手册也跟IKAnalyer2012-FFHotfix1
dianzhouyu2189·2020-06-23 04:02
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他