在Hanlp词典手动添加未登录词的方式介绍

阅读更多

 

在使用Hanlp词典进行分词的时候,会出现分词不准的情况,原因是内置词典中并没有收录当前这个词,也就是我们所说的未登录词,只要把这个词加入到内置词典中就可以解决类似问题,如何操作呢,下面我们来看一下:

一,在Hanlp词典中添加未登录词

1.找到hanlp内置词典目录

位于D:\hnlp\hanlp_code\hanlp\data\dictionary\custom 也就是Hanlp安装包中的data\dictionary\custom下目录

 


在Hanlp词典手动添加未登录词的方式介绍_第1张图片
 

  1. 将未登录词以词名,词性,词频的格式添加到文件中(句首或者句尾都可以)


    在Hanlp词典手动添加未登录词的方式介绍_第2张图片
     

     

    3.将字典的同名bin文件删除掉

    执行文件时读取的是bin文件,必须删掉后等下次执行时重新生成,新字典才发挥作用


    在Hanlp词典手动添加未登录词的方式介绍_第3张图片
     

     

    4.使用新字典重新执行文件

    执行时会遇到没有相关bin文件的提示,不过放心,程序会自动生成一个新的bin文件,骚等片刻,就好了。



      

     

    验证结果是否正确



     

     

     

     

 

  • 在Hanlp词典手动添加未登录词的方式介绍_第4张图片
  • 大小: 17.1 KB
  • 在Hanlp词典手动添加未登录词的方式介绍_第5张图片
  • 大小: 14.9 KB
  • 在Hanlp词典手动添加未登录词的方式介绍_第6张图片
  • 大小: 20.7 KB
  • 在Hanlp词典手动添加未登录词的方式介绍_第7张图片
  • 大小: 16.1 KB
  • 在Hanlp词典手动添加未登录词的方式介绍_第8张图片
  • 大小: 1.8 KB
  • 查看图片附件

你可能感兴趣的:(在Hanlp词典手动添加未登录词的方式介绍)