怎么實現(xiàn)ESIK分詞器添加遠程詞組

本篇內(nèi)容介紹了“怎么實現(xiàn)ES IK分詞器添加遠程詞組”的有關知識，在實際案例的操作過程中，不少人都會遇到這樣的困境，接下來就讓小編帶領大家學習一下如何處理這些情況吧！希望大家仔細閱讀，能夠?qū)W有所成！

10年積累的網(wǎng)站設計制作、做網(wǎng)站經(jīng)驗，可以快速應對客戶對網(wǎng)站的新想法和需求。提供各種問題對應的解決方案。讓選擇我們的客戶得到更好、更有力的網(wǎng)絡服務。我雖然不認識你，你也不認識我。但先網(wǎng)站設計后付款的網(wǎng)站建設流程，更有汨羅免費網(wǎng)站建設讓你可以放心的選擇與我們合作。

在IKAnalyzer.cfg.xml配置文件中修改配置項

<entry key="remote_ext_dict">URLS</entry>
<entry key="remote_ext_stopwords">URLS</entry>

將URLS替換成遠程字典地址,多個地址使用分號 (;) 分隔.
每條url，比如http://127.0.0.1/dict/my.txt ，該請求只需滿足以下兩點即可完成分詞熱更新:
1)響應需要返回兩個頭部(header)，一個是Last-Modified，一個是ETag，這兩者都是字符串類型，只要有一個發(fā)生變化，該插件就會去抓取新的分詞進而更新詞庫。
2)返回的內(nèi)容格式是一行一個分詞，換行符用\n即可。
滿足上面兩點要求可實現(xiàn)熱更新分詞，不需要重啟 ES 實例。

可以將需自動更新的熱詞放在一個 UTF-8 編碼的 .txt 文件里，放在 nginx 或其他簡易 http server 下，當 .txt 文件修改時，http server 會在客戶端請求該文件時自動返回相應的 Last-Modified 和 ETag，或者可以另外做一個工具來從業(yè)務系統(tǒng)提取相關詞匯，并更新這個 .txt 文件。

http server的方式比較簡單下面舉一個通過SpringMVC響應的方式的實現(xiàn)

// 字典文件所在文件路徑
private static final String EXT_DICT_PATH = "/data/soft/mydic";
@RequestMapping(value="/getCustomDict.htm")
public void getCustomDict(HttpServletRequest request, HttpServletResponse response){

      try {

          // 讀取字典文件
          String path = EXT_DICT_PATH;
          File file = new File(path);

          String content = "";
          if(file.exists()){

              // 讀取文件內(nèi)容
              FileInputStream fi = new FileInputStream(file);
              byte[] buffer = new byte[(int) file.length()];
              int offset = 0, numRead = 0;

              while (offset < buffer.length && (numRead = fi.read(buffer, offset, buffer.length - offset)) >= 0) {
                  offset += numRead;
              }

              fi.close();
              content = new String(buffer, "UTF-8");
          }

          // 返回數(shù)據(jù)
          OutputStream out= response.getOutputStream();
          // Head需要帶上 Last-Modified ETag 屬性
          // 此處是輸出的文件內(nèi)容大小,不一定是這個樣子,只要保證當文件發(fā)生變化時,Last-Modified和ETag也是變化的就OK ,比如也可以是文件的MD5
          response.setHeader("Last-Modified", String.valueOf(content.length()));
          response.setHeader("ETag",String.valueOf(content.length()));

          response.setContentType("text/plain; charset=utf-8");
          out.write(content.getBytes("utf-8"));

          out.flush();
          logger.info(content+"這是讀取數(shù)據(jù)值");

      } catch (Exception e) {
          e.printStackTrace();
      }

  }

“怎么實現(xiàn)ES IK分詞器添加遠程詞組”的內(nèi)容就介紹到這里了，感謝大家的閱讀。如果想了解更多行業(yè)相關的知識可以關注創(chuàng)新互聯(lián)網(wǎng)站，小編將為大家輸出更多高質(zhì)量的實用文章！

分享標題：怎么實現(xiàn)ESIK分詞器添加遠程詞組
本文來源：http://muchs.cn/article22/iegpjc.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供微信公眾號、微信小程序、云服務器、品牌網(wǎng)站建設、網(wǎng)站營銷、建站公司

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源：創(chuàng)新互聯(lián)

猜你還喜歡下面的內(nèi)容