测试Ik分词器以及增加自己的词汇
合集下载
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
测试Ik分词器以及增加⾃⼰的词汇测试
启动kibana，打开开发⼯具
ik_smart:最少切分
GET _analyze
{
"analyzer": "ik_smart",
"text": ["中华⼈民共和国"]
}
ik_max_word：最细粒度划分，穷尽词库。
GET _analyze
{
"analyzer": "ik_max_word",
"text": ["中华⼈民共和国"]
}
我们输⼊⼀个⼈名：⽐如说宋殿鑫想当Java开发⼯程师，宋殿鑫是⼈名，但是被分开了。
出现问题：有些词被拆开了！
这种⾃⼰需要的词，要加到我们的分词字典中！
Ik分词器增加⾃⼰的配置
来到 elasticsearch-7.6.1\plugins\ik\config ⽬录下，打开IKAnalyzer.cfg.xml
我们先创建⼀个dic⽂件，也就是字典，其实我们打开其他的dic⽂件也是⼀样的。
编写后注⼊到配置⽂件中。
然后重启es和kibana，可以看到我们新加的⽂件
再分词，可以发现，宋殿鑫成为了单独的字段，没被细分。