如何輕松集成新版Elasticsearch7.9中文搜索到Laravel7項(xiàng)目

這篇文章主要介紹如何輕松集成新版Elasticsearch7.9中文搜索到Laravel7項(xiàng)目,文中介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們一定要看完!

站在用戶的角度思考問(wèn)題,與客戶深入溝通,找到二連浩特網(wǎng)站設(shè)計(jì)與二連浩特網(wǎng)站推廣的解決方案,憑借多年的經(jīng)驗(yàn),讓設(shè)計(jì)與互聯(lián)網(wǎng)技術(shù)結(jié)合,創(chuàng)造個(gè)性化、用戶體驗(yàn)好的作品,建站類型包括:網(wǎng)站設(shè)計(jì)制作、做網(wǎng)站、企業(yè)官網(wǎng)、英文網(wǎng)站、手機(jī)端網(wǎng)站、網(wǎng)站推廣、國(guó)際域名空間、虛擬空間、企業(yè)郵箱。業(yè)務(wù)覆蓋二連浩特地區(qū)。

只需五步驟:

1.啟動(dòng) 集成ik中文分詞插件的Elasticsearch7.9 Docker鏡像
2.Laravel7 配置 Scout
3.配置 Model模型
4.導(dǎo)入數(shù)據(jù)
5.搜索

演示地址

如何輕松集成新版Elasticsearch7.9中文搜索到Laravel7項(xiàng)目

www.ar414.com/search?query=php%E5%...

搜索范圍

  • 文章內(nèi)容

  • 標(biāo)題

  • 標(biāo)簽

結(jié)果權(quán)重

  1. 出現(xiàn)關(guān)鍵詞數(shù)量

  2. 出現(xiàn)關(guān)鍵詞次數(shù)

搜索頁(yè)面

  • 高亮顯示

  • 分詞顯示

  • 結(jié)果分頁(yè)

前言

主要是博客剛好想做個(gè)搜索,順便就整理成文章

Laravel + Elasticsearch 很多前輩都寫(xiě)過(guò)教程和案例,但是隨著Elasticsearch和laravel的版本升級(jí) 以前的文章很多都不適用新版本的,建議大家使用任何開(kāi)源項(xiàng)目時(shí)應(yīng)該過(guò)一遍文檔以當(dāng)前使用的版本文檔為主,教程為輔

  • Elasticsearch 7.9

  • Laravel 7

  • elasticsearch-analysis-ik v7.9

參考

  • ik 中文分詞插件

  • elasticsearch 官方文檔

使用集成ik中文分詞插件的Elasticsearch

拉取docker

$ docker pull ar414/elasticsearch-7.9-ik-plugin

創(chuàng)建日志和數(shù)據(jù)存儲(chǔ)目錄

本地映射到docker容器內(nèi),防止docker重啟數(shù)據(jù)丟失

$ mkdir -p /data/elasticsearch/data
$ mkdir -p /data/elasticsearch/log
$ chmod -R 777 /data/elasticsearch/data
$ chmod -R 777 /data/elasticsearch/log

運(yùn)行

docker run -d -p 9200:9200 -p 9300:9300 -e "discovery.type=single-node" -v /data/elasticsearch/data:/var/lib/elasticsearch -v /data/elasticsearch/log:/var/log/elasticsearch ar414/elasticsearch-7.9-ik-plugin

驗(yàn)證

$ curl http://localhost:9200{
  "name" : "01ac21393985",  "cluster_name" : "docker-cluster",  "cluster_uuid" : "h8L336qcRb2i1aydOv04Og",  "version" : {
    "number" : "7.9.0",    "build_flavor" : "default",    "build_type" : "docker",    "build_hash" : "a479a2a7fce0389512d6a9361301708b92dff667",    "build_date" : "2020-08-11T21:36:48.204330Z",    "build_snapshot" : false,    "lucene_version" : "8.6.0",    "minimum_wire_compatibility_version" : "6.8.0",    "minimum_index_compatibility_version" : "6.0.0-beta1"
  },  "tagline" : "You Know, for Search"}

測(cè)試中文分詞

curl -X POST "http://localhost:9200/_analyze?pretty" -H 'Content-Type: application/json' -d'
{
  "analyzer": "ik_max_word",
  "text":     "laravel天下無(wú)敵"
}
'{
  "tokens" : [
    {
      "token" : "laravel",      "start_offset" : 0,      "end_offset" : 7,      "type" : "ENGLISH",      "position" : 0    },    {
      "token" : "天下無(wú)敵",      "start_offset" : 7,      "end_offset" : 11,      "type" : "CN_WORD",      "position" : 1    },    {
      "token" : "天下",      "start_offset" : 7,      "end_offset" : 9,      "type" : "CN_WORD",      "position" : 2    },    {
      "token" : "無(wú)敵",      "start_offset" : 9,      "end_offset" : 11,      "type" : "CN_WORD",      "position" : 3    }
  ]}

Laravel 項(xiàng)目中使用 Elasticsearch

如何輕松集成新版Elasticsearch7.9中文搜索到Laravel7項(xiàng)目
Elasticsearch官方有提供 SDK,在 Laravel 項(xiàng)目中可以更加優(yōu)雅快速的接入 Elasticsearch,Laravel 本身有提供 Scout全文搜索 的解決方案,我們只需將默認(rèn)的 Algolia 驅(qū)動(dòng) 替換成ElasticSearch驅(qū)動(dòng)。

安裝

  • laravel/scout

  • matchish/laravel-scout-elasticsearch

    $ composer require laravel/scout
    $ composer require matchish/laravel-scout-elasticsearch

配置

  1. 生成 Scout 配置文件(config/scout.php)

    $ php artisan vendor:publish --provider="Laravel\Scout\ScoutServiceProvider"Copied File [\vendor\laravel\scout\config\scout.php] To [\config\scout.php]Publishing complete.
  2. 指定 Scout 驅(qū)動(dòng)

  • 第一種:在.env文件中指定(建議)

    SCOUT_DRIVER=Matchish\ScoutElasticSearch\Engines\ElasticSearchEngine
  • 第二種:在config/scout.php直接修改默認(rèn)驅(qū)動(dòng)

    'driver' => env('SCOUT_DRIVER', 'algolia')改為'driver' => env('SCOUT_DRIVER', 'Matchish\ScoutElasticSearch\Engines\ElasticSearchEngine')
  1. 指定Elasticsearch服務(wù)IP端口

    如果使用docker部署則使用docker0的IP,Linux通過(guò)ifconfig查看

    .env中配置

    ELASTICSEARCH_HOST=172.17.0.1:9200
  2. 注冊(cè)服務(wù)
    config/app.php

    'providers' => [
     // Other Service Providers
     \Matchish\ScoutElasticSearch\ElasticSearchServiceProvider::class],
  3. 清除配置緩存

    $ php artisan config:clear

至此 laravel 已經(jīng)接入 Elasticsearch

實(shí)際業(yè)務(wù)中使用

需求

如何輕松集成新版Elasticsearch7.9中文搜索到Laravel7項(xiàng)目

通過(guò)博客右上角的搜索框可以搜索到與關(guān)鍵詞相關(guān)的文章,從以下幾點(diǎn)匹配

  • 文章內(nèi)容

  • 文章標(biāo)題

  • 文章標(biāo)簽

涉及到2張 MySQL表 以及字段

  • article

    • title

    • tags

  • article_content

    • content

為文章配置 Elasticsearch 索引

  1. 創(chuàng)建索引配置文件(config/elasticsearch.php)

    $ touch config/elasticsearch.php
  2. elasticsearch.php 配置字段映射

    <?phpreturn [
     'indices' => [
         'mappings' => [
             'blog-articles' => [
                 "properties"=>  [
                     "content"=>  [
                         "type"=>  "text",
                         "analyzer"=>  "ik_max_word",
                         "search_analyzer"=>  "ik_smart"
                     ],
                     "tags"=>  [
                         "type"=>  "text",
                         "analyzer"=>  "ik_max_word",
                         "search_analyzer"=>  "ik_smart"
                     ],
                     "title"=>  [
                         "type"=>  "text",
                         "analyzer"=>  "ik_max_word",
                         "search_analyzer"=>  "ik_smart"
                     ]
                 ]
             ]
         ]
     ],];
  • analyzer:字段文本的分詞器

    • ik_max_word:ik中文分詞插件提供,對(duì)文本進(jìn)行最大數(shù)量分詞
      laravel天下無(wú)敵 -> laravel,天下無(wú)敵,天下,無(wú)敵

    • ik_smart: ik中文分詞插件提供,對(duì)文本進(jìn)行最小數(shù)量分詞
      laravel天下無(wú)敵 -> laravel,天下無(wú)敵

    • search_analyzer:搜索詞的分詞器

    • 根據(jù)具體業(yè)務(wù)場(chǎng)景選擇(顆粒小占用資源多,一般場(chǎng)景analyzer使用ik_max_word,search_analyzer使用ik_smart):

配置文章模型

建議先看一遍 Laravel Scout 使用文檔

  1. 引入Laravel Scout

     namespace App\Models\Blog;
    
     use Laravel\Scout\Searchable;
    
     class Article extends BlogBaseModel
     {
         use Searchable;
     }
  2. 指定索引(剛剛配置文件中的elasticsearch.indices.mappings.blog-articles)

     /**
      * 指定索引
      * @return string
      */
     public function searchableAs()
     {
         return 'blog-articles';
     }
  3. 設(shè)置導(dǎo)入索引的數(shù)據(jù)字段

     /**
      * 設(shè)置導(dǎo)入索引的數(shù)據(jù)字段
      * @return array
      */
     public function toSearchableArray()
     {
         return [
             'content' => ArticleContent::query()
                 ->where('article_id',$this->id)
                 ->value('content'),
             'tags'    => implode(',',$this->tags),
             'title'   => $this->title
         ];
     }
  4. 指定 搜索索引中存儲(chǔ)的唯一ID

     /**
      * 指定 搜索索引中存儲(chǔ)的唯一ID
      * @return mixed
      */
     public function getScoutKey()
     {
         return $this->id;
     }
    
     /**
      * 指定 搜索索引中存儲(chǔ)的唯一ID的鍵名
      * @return string
      */
     public function getScoutKeyName()
     {
         return 'id';
     }

數(shù)據(jù)導(dǎo)入

其實(shí)是將數(shù)據(jù)表中的數(shù)據(jù)通過(guò)Elasticsearch導(dǎo)入到Lucene
Elasticsearch 是 Lucene 的封裝,提供了 REST API 的操作接口

  • 一鍵自動(dòng)導(dǎo)入: php artisan scout:import

  • 導(dǎo)入指定模型: php artisan scout:import ${model}

$ php artisan scout:import "App\Models\Blog\Article"Importing [App\Models\Blog\Article]Switching to the new index
5/5 [????????????????????????????] 100%[OK] All [App\Models\Blog\Article] records have been imported.

導(dǎo)入失敗,常見(jiàn)原因:

  • Unresolvable dependency resolving [Parameter #0 [  integer $retries ]] in class Elasticsearch\Transport

    • 解決: 修改配置后,沒(méi)有清除配置緩存

  • invalid_index_name_exception

    • 解決: searchableAs配置錯(cuò)誤,為索引創(chuàng)建別名后,指定別名

檢查索引是否正確

$ curl -XGET http://localhost:9200/blog-articles/_mapping?pretty{
  "blog-articles_1598362919" : {
    "mappings" : {
      "properties" : {
        "__class_name" : {
          "type" : "text",          "fields" : {
            "keyword" : {
              "type" : "keyword",              "ignore_above" : 256            }
          }
        },        "content" : {
          "type" : "text",          "analyzer" : "ik_max_word",          "search_analyzer" : "ik_smart"
        },        "tags" : {
          "type" : "text",          "analyzer" : "ik_max_word",          "search_analyzer" : "ik_smart"
        },        "title" : {
          "type" : "text",          "analyzer" : "ik_max_word",          "search_analyzer" : "ik_smart"
        }
      }
    }
  }}

測(cè)試

  1. 創(chuàng)建一個(gè)測(cè)試命令行

    $ php artisan make:command ElasticTest
  2. 代碼

<?phpnamespace App\Console\Commands;use App\Models\Blog\Article;use App\Models\Blog\ArticleContent;use Illuminate\Console\Command;use Illuminate\Support\Carbon;class ElasticTest extends Command{
    /**
     * The name and signature of the console command.
     *
     * @var string
     */
    protected $signature = 'elasticsearch {query}';

    /**
     * The console command description.
     *
     * @var string
     */
    protected $description = 'elasticsearch test';

    /**
     * Create a new command instance.
     *
     * @return void
     */
    public function __construct()
    {
        parent::__construct();
    }

    /**
     * Execute the console command.
     *
     * @return mixed
     */
    public function handle()
    {
        //
        $startTime = Carbon::now()->getPreciseTimestamp(3);
        $articles = Article::search($this->argument('query'))->get()->toArray();
        $userTime = Carbon::now()->getPreciseTimestamp(3) - $startTime;
        echo "耗時(shí)(毫秒):{$userTime} \n";

        //content在另外一張表中,方便觀察測(cè)試 這里輸出
        if(!empty($articles)) {
            foreach($articles as &$article) {
                $article = ArticleContent::query()->where('article_id',$article['id'])->value('content');
            }
        }

        var_dump($articles);

    }}
  1. 測(cè)試

    $ php artisan elasticsearch 周杰倫

如何輕松集成新版Elasticsearch7.9中文搜索到Laravel7項(xiàng)目

  1. 復(fù)雜查詢
    例如:自定義高亮顯示

    //ONGR\ElasticsearchDSL\Highlight\Highlight ArticleModel::search($query,function($client,$body) {
             $higlight = new Highlight();
             $higlight->addField('content',['type' => 'plain']);
             $higlight->addField('title');
             $higlight->addField('tags');
             $body->addHighlight($higlight);
             $body->setSource(['title','tags']);
             return $client->search(['index' => (new ArticleModel())->searchableAs(), 'body' => $body->toArray()]);
         })->raw();

復(fù)雜自定義查詢回調(diào)中的$client和$body,可根據(jù)這兩個(gè)包進(jìn)行靈活操作

$client 官方 elasticsearch/elasticsearch package(https://packagist.org/packages/elasticsearch/elasticsearch)

$body ongr/elasticsearch-dsl package(https://packagist.org/packages/ongr/elasticsearch-dsl)

以上是“如何輕松集成新版Elasticsearch7.9中文搜索到Laravel7項(xiàng)目”這篇文章的所有內(nèi)容,感謝各位的閱讀!希望分享的內(nèi)容對(duì)大家有幫助,更多相關(guān)知識(shí),歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道!

分享標(biāo)題:如何輕松集成新版Elasticsearch7.9中文搜索到Laravel7項(xiàng)目
轉(zhuǎn)載來(lái)源:http://muchs.cn/article0/ipppio.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站排名、動(dòng)態(tài)網(wǎng)站、Google、服務(wù)器托管、關(guān)鍵詞優(yōu)化、建站公司

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)

成都定制網(wǎng)站網(wǎng)頁(yè)設(shè)計(jì)