ElasticSearch IK分词自动更新热词采坑教程(7.8.1)

最新推荐文章于 2022-10-28 11:25:42 发布

原创

最新推荐文章于 2022-10-28 11:25:42 发布 · 1.1k 阅读

9 ·

CC 4.0 BY-SA版权

本文介绍如何在Elasticsearch中使用IK分词器插件进行热更新，通过配置远程字典和停止词，实现无需重启ES实例即可更新分词库的方法。

https://github.com/medcl/elasticsearch-analysis-ik/releases
下载对应的IK分词器,并安装到es插件文件夹中
进入文件夹打开
在这里插入图片描述

-------------------------------来看下官方的介绍说明-----------------------------------

热更新 IK 分词使用方法
目前该插件支持热更新 IK 分词，通过上文在 IK 配置文件中提到的如下配置

<!--用户可以在这里配置远程扩展字典 -->
<entry key="remote_ext_dict">location</entry>
<!--用户可以在这里配置远程扩展停止词字典-->
<entry key="remote_ext_stopwords">location</entry>

其中 location 是指一个 url，比如 http://yoursite.com/getCustomDict，该请求只需满足以下两点即可完成分词热更新。

该 http 请求需要返回两个头部(header)，一个是 Last-Modified，一个是 ETag，这两者都是字符串类型，只要有一个发生变化，该插件就会去抓取新的分词进而更新词库。

该 http 请求返回的内容格式是一行一个分词，换行符用 \n 即可。

满足上面两点要求就可以实现热更新分词了，不需要重启 ES 实例。

可以将需自动更新的热词放在一个 UTF-8 编码的 .txt 文件里，放在 nginx 或其他简易 http server 下，当 .txt 文件修改时，http server 会在客户端请求该文件时自动返回相应的 Last-Modified 和 ETag。可以另外做一个工具来从业务系统提取相关词汇，并更新这个 .txt 文件。

所以你写一个HTTP请求我试却没获取不到header,输出的字符串或是OutputStream在Es上也无法接收,
而且我在csdn上查的90%的代码都差不多…燕儿其实是这样的
是这样滴
1.一第次会掉一个head接口获取ETag(初次获取不到,第一次请求为写入es标记,第二次才能获取到,如果返回的标记有变化测请求get接口)
2.第二次掉get接口获取更新的词语数据


@RestController
@RequestMapping("/ik")
public class IkController {
   
   

    @RequestMapping(value = "/validIkWork" ,method= RequestMethod.HEAD,produces = {
   
   "text/html;charset=utf-8"})
    public void  getH(HttpServletRequest request, HttpServletResponse response) {
   
   
            /**
             * 打印出header,看看都有什么key是IK返回的
             * if-none-match    这个是es返回的字段,我们获取这个header值做对比
             * 第一次请求没有
             *
             */
            Enumeration<String> headerNames = request.getHeaderNames();
            while

最低0.47元/天解锁文章