hadoop小学生
精灵王
精灵王
  • 注册日期2018-09-13
  • 发帖数160
  • QQ3234520070
  • 火币360枚
  • 粉丝0
  • 关注0
阅读:3367回复:0

如何在hanlp词典中手动添加未登录词

楼主#
更多 发布于:2019-03-18 15:10
我们在使用hanlp词典进行分词的时候,难免会出现分词不准确的情况,原因是由于内置词典中并没有收录当前的这个词,也就是我们所说的未登录词,只要把这个词加入到内置词典中就可以解决类似问题,如何操作,下面我们就看一下具体的步骤


1找到hanlp内置词典目录

位于D:\hnlp\hanlp_code\hanlp\data\dictionary\custom也就是Hanlp安装包中的data\dictionary\custom下目录

图片:图1.png


2将未登录词以词名,词性,词频的格式添加到文件中(句首或者句尾都可以)

图片:图2.png


3将字典的同名bin文件删除掉
执行文件时读取的是bin文件,必须删掉后等下次执行时重新生成,新字典才发挥作用

图片:图3.png


4使用新字典重新执行文件
执行时会遇到没有相关bin文件的提示,不过放心,程序会自动生成一个新的bin文件,骚等片刻,就好了。

图片:图4.png


验证结果是否正确

图片:图5.png


喜欢0 评分0
DKHadoop用着还不错!
游客

返回顶部