elasticsearch-6.5.2におけるelasticsearch-analysis-ikのインストールチュートリアル

クズども · 掲載地 2018/12/13 10:21:21

elasticsearchの公式デフォルトワードセグメンテーションプラグインは、中国語のワードセグメンテーションには理想的ではありません。例えば、今回はES公式ウェブサイトが提供する単語分割プラグインが中国語の単語分割に効果的でない理由を示す具体的な例を挙げます。
参考文献:

https://www.elastic.co/guide/en/ ... ting_analyzers.html
https://www.elastic.co/guide/en/ ... ndices-analyze.html

分析インターフェースに以下の方法でデータを提出します。

http://ip:9200/_analyze POST请求

{
「アナライザー」:「標準」
「テキスト」:「建築家http://www.itsvse.com美しい」
}

Elasticsearchを直接使うと、中国語のコンテンツ検索で恥ずかしい問題に直面するでしょう。中国語の単語は一つずつ漢字に分けられますKibanaを使って描く場合、用語ごとにグループ化し、その結果、漢字がグループに分けられます。

幸いなことに、medcl(中国で英語を最初に研究した人物の一人)によって書かれた中国語の単語分割プラグインが2つあり、1つはik、もう1つはmmsegで、以下はikの使い方を紹介するだけです。

IK AnalysisプラグインはLucene IKアナライザーをelasticsearchに統合し、カスタム辞書をサポートしています。

Elasticsearch-Analysis-IKプロジェクトアドレス:https://github.com/medcl/elasticsearch-analysis-ik

Install elasticsearch-analysis-ik

まず、Elasticsearchの実行を止めてください。JPSはプロセスIDを見つけて、kill -9のプロセスIDで終了します! (そもそもテストはしていませんが、途中で止めてインストールした方が安全です)

elasticsearchプラグイン(v5.5.1バージョンからサポート)を使ってインストール:

ログインが見えます。

注意:6.3.0を独自のelasticsearchバージョンに置き換えてください

サーバーにインストールしましたElasticsearchは6.5.2ですバージョンでは、コマンドは以下の通りです:

ログインが見えます。

設置エラーは以下の通りです:

スレッド「main」java.nio.file.FileSystemException: /usr/local/elasticsearch-6.5.2/config/analysis-ik: 操作は許可されません

Elasticsearchのインストールプラグインはrootで実行する必要がありますそこで、su rootを使って管理者ステータスに切り替え、インストールを再実行すると、以下の図のように成功しました。

再度インターフェースに投稿リクエストを送信してテストを行い、投稿内容は以下の通りです:

{
「アナライザー」:「ik_max_word」、
「テキスト」:「建築家http://www.itsvse.com美しい」
}

私は普通に意味を理解できることに気づき、「architect(建築家)」「美しい(beautiful)」「architecture(建築)」を一つの言葉に分けました。

ik_max_wordとik_smartの違いは何ですか?

ik_max_word:テキストは最も細かく分割され、「中華人民共和国国歌」は「中華人民共和国、中国人民、中国、中華人民共和国、人民、共和国、共和国、何、国歌」に分割され、あらゆる可能な組み合わせを尽くします。

ik_smart:「中華人民共和国国歌」を「中華人民共和国国歌」に分割するなど、最も粗雑な分割を行います。

クズども · 掲載地 2018/12/13 11:04:13

その他のプラグイン:http://www.searchtech.pro/elasticsearch-plugins

elasticsearch-6.5.2におけるelasticsearch-analysis-ikのインストールチュートリアル

関連記事

閲覧したセクション