基于hanlp的es分詞插件-創(chuàng)新互聯(lián)

10多年的八公山網(wǎng)站建設經(jīng)驗，針對設計、前端、開發(fā)、售后、文案、推廣等六對一服務，響應快，48小時及時工作處理。全網(wǎng)營銷推廣的優(yōu)勢是能夠根據(jù)用戶設備顯示端的尺寸不同，自動調整八公山建站的顯示方式，使網(wǎng)站能夠適用不同顯示終端，在瀏覽器中調整網(wǎng)站的寬度，無論在任何一種瀏覽器上瀏覽網(wǎng)站，都能展現(xiàn)優(yōu)雅布局與設計，從而大程度地提升瀏覽體驗。成都創(chuàng)新互聯(lián)公司從事“八公山網(wǎng)站設計”,“八公山網(wǎng)站推廣”以來，每個客戶項目都認真落實執(zhí)行。

摘要： elasticsearch是使用比較廣泛的分布式搜索引擎，es提供了一個的單字分詞工具，還有一個分詞插件ik使用比較廣泛，hanlp是一個自然語言處理包，能更好的根據(jù)上下文的語義，人名，地名，組織機構名等來切分詞

Elasticsearch

默認分詞

 

輸出：  

 

IK分詞  

 

輸出：  

 

hanlp分詞

 

輸出：

 

ik分詞沒有根據(jù)句子的含義來分詞，hanlp能根據(jù)語義正確的切分出詞

安裝步驟：  

1、進入https://github.com/pengcong90/elasticsearch-analysis-hanlp，下載插件并解壓到es的plugins目錄下，修改analysis-hanlp目錄下的hanlp.properties文件，修改root的屬性，值為analysis－h(huán)anlp下的data

目錄的地址

2、修改es config目錄下的jvm.options文件，最后一行添加

-Djava.security.policy=../plugins/analysis-hanlp/plugin-security.policy

 

重啟 es

GET /_analyze?analyzer=hanlp-index&pretty=true

{

“text”:”張柏芝士蛋糕店”

}

測試是否安裝成功

analyzer有hanlp-index（索引模式）和hanlp-smart（智能模式）

自定義詞典

修改 plugins/analysis-hanlp/data/dictionary/custom下的 我的詞典.txt文件

格式遵從 [單詞] [詞性A] [A的頻次]

修改完后刪除同目錄下的 CustomDictionary.txt.bin文件

重啟 es服務

 

當前題目：基于hanlp的es分詞插件-創(chuàng)新互聯(lián)
文章出自：http://www.muchs.cn/article12/dsjsdc.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供全網(wǎng)營銷推廣、網(wǎng)站制作、網(wǎng)頁設計公司、定制網(wǎng)站、服務器托管、營銷型網(wǎng)站建設

廣告

聲明：本網(wǎng)站發(fā)布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經(jīng)允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)