ElasticSearch-Analysis-IK
ElasticSearch-Analysis-IK
1下载源码
在此之前，本机需要安装了jdk8.
ik分词源码下载
地址：https://github.com/medcl/elasticsearch-analysis-ik
根据自己的elasticsearch的版本来选择下载相应的源码,我用的elasticsearch的版本2.3.4，对应的elasticsearch-analysis-ik版本v1.9.x的基本都支持。
2 将elasticsearch-analysis-ik-1.9.4.zip解压后编译。使用命令 mvc package 打包编译。即可获得
target/releases/elasticsearch-analysis-ik-1.9.4.zip,然后这个zip包放到elasticsearch的安装目录下的plugins/ik下，如果ik目录不存在则自己创建。
3 重启elasticsearch
4 做个例子
创建索引 ：
curl -XPUT http://localhost:9200/index
创建映射：
curl -XPOST http://localhost:9200/index/fulltext/_mapping -d'
{
"fulltext": {
"_all": {
"analyzer": "ik_max_word",
"search_analyzer": "ik_max_word",
"term_vector": "no",
"store": "false"
},
"properties": {
"content": {
"type": "string",
"store": "no",
"term_vector": "with_positions_offsets",
"analyzer": "ik_max_word",
"search_analyzer": "ik_max_word",
"include_in_all": "true",
"boost": 8
}
}
}
}'
增加文档：
curl -XPOST http://localhost:9200/index/fulltext/1 -d'
{"content":"美国留给伊拉克的是个烂摊子吗"}
'
curl -XPOST http://localhost:9200/index/fulltext/2 -d'
{"content":"公安部：各地校车将享最高路权"}
'
curl -XPOST http://localhost:9200/index/fulltext/3 -d'
{"content":"中韩渔警冲突调查：韩警平均每天扣1艘中国渔船"}
'
curl -XPOST http://localhost:9200/index/fulltext/4 -d'
{"content":"中国驻洛杉矶领事馆遭亚裔男子枪击 嫌犯已自首"}
'
查询：
curl -XPOST http://localhost:9200/index/fulltext/_search -d'
{
"query" : { "term" : { "content" : "中国" }},
"highlight" : {
"pre_tags" : ["
"post_tags" : ["", ""],
"fields" : {
"content" : {}
}
}
}
'
5 热更新IK分词使用方法
elasticsearch/plugins/ik/config/IKAnalyzer.cfg.xml
通过设置
其中 location 是指一个 url，比如 http://yoursite.com/getCustomDict，该请求只需满足以下两点即可完成分词热更新。
该 http 请求需要返回两个头部(header)，一个是 Last-Modified，一个是 ETag，这两者都是字符串类型，只要有一个发生变化，该插件就会去抓取新的分词进而更新词库。
该 http 请求返回的内容格式是一行一个分词，换行符用 \n 即可。
满足上面两点要求就可以实现热更新分词了，不需要重启 ES 实例。
可以将需自动更新的热词放在一个 UTF-8 编码的 .txt 文件里，放在 nginx 或其他简易 http server 下，当 .txt 文件修改时，http server 会在客户端请求该文件时自动返回相应的 Last-Modified 和 ETag。可以另外做一个工具来从业务系统提取相关词汇，并更新这个 .txt 文件。