elasticsearch6.5.4 添加 ik 中文分词器无需重启分词热更新

第一步: 安装elasticsearch6.5.4版本

第二步:下载elasticsearch-ik-6.5.4.zip 例如:https://github.com/medcl/elasticsearch-analysis-ik

               拷贝到es的plugins/ik目录下 解压缩,

               把elasticsearch-analysis-ik-6.5.4.jar拷贝到 plugins/ik 目录下

               elasticsearch6.5.4 添加 ik 中文分词器无需重启分词热更新_第1张图片

              打开cmd 切到 ik 的根目录 开始打包执行命令 mvn clean package -DskipTests

BUILD SUCCESS 成功后,到target 目下找到 jar包 

第三步 :在es的config目录下新建analysis-ik文件夹

               拷贝 IKAnalyzer.cfg.xml 并且把系统的字典文件同时拷贝过来

修改 IKAnalyzer.cfg.xml 文件




    IK Analyzer 扩展配置
    
    lk_word.dic
    
    
    
    http://www.xxxxxx.com:8080/system/ik/actualTimeRedDic.do
    
    

注意:若你是单节点的es集群的话,则只需在一台部署es-ik。若比如像我这里的话,是3台,则需在三台都部署es-ik,且配置要一样。

参数  remote_ext_dict 默认值远程扩展字典的 地址location 替换为 你的服务端地址 例如:http://www.xxxxxx.com:8080/system/ik/actualTimeRedDic.do

          该请求只需满足以下两点即可完成分词热更新,即http 请求需要返回两个头部(header)

1. 一个是 Last-Modified

2. 一个是 ETag

这两者都是字符串类型,只要有一个发生变化,该插件就会去抓取新的分词进而更新词库。 http 请求返回的内容格式是一行一个分词,换行符用 \n 。满足上面两点要求就可以实现热更新分词了,不需要重启 ES 实例

例如 :

public void loadDic (HttpServletRequest req,HttpServletResponse response){
        OutputStream out = null;
        try {

             String filePath = "D:/word.text"
            // 读取字典文件
            File file = new File(filepath);
            String content = "";
            if(file.exists()){
                // 读取文件内容
                FileInputStream fi = new FileInputStream(file);
                byte[] buffer = new byte[(int) file.length()];
                int offset = 0, numRead = 0;
                while (offset < buffer.length && (numRead = fi.read(buffer, offset, buffer.length - offset)) >= 0) {
                    offset += numRead;
                }
                fi.close();
                content = new String(buffer, "UTF-8");
            }
            // 返回数据
            out = response.getOutputStream();
            response.setHeader("Last-Modified", String.valueOf(System.currentTimeMillis()));
            response.setHeader("ETag",String.valueOf(System.currentTimeMillis()));
            response.setContentType("text/plain; charset=utf-8");
            out.write(content.getBytes("utf-8"));
            out.flush();
        } catch (IOException e) {
            e.printStackTrace();
        } finally {
            if (null != out) {
                try {
                    out.close();
                } catch (IOException e) {
                    e.printStackTrace();
                }
            }
        }
    }

当 d:/word.txt (utf-8)内容发生变化时,es 监听器就会每格 1 分钟,检查一次,也就是说,至少等待一分钟后,更新的分词才会有效果。

你可能感兴趣的:(java,es,elasticsearch,elasticsearc,ik,es,ik,分词热更新)