前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >04-Elasticsearch-ES集成IK分词器

04-Elasticsearch-ES集成IK分词器

作者头像
彼岸舞
发布2022-10-04 08:25:17
2750
发布2022-10-04 08:25:17
举报

分词器

分词器汇总

分词器

拆分方式

standard

空格

simple

非字母

whitespace

空格

stop

去除英文的助词(a the is)

keyword

不拆分(关键词)

ik_max_word

最大词汇拆分

ik_smart

最小词汇拆分

默认分词器

代码语言:javascript
复制
POST /_analyze
{
  "analyzer": "standard",
  "text": ["I study in imooc.com!"]
}

默认分词器, 英文按照空格拆分, 中文直接拆成单个汉字, 大写自动转小写

在指定索引中分析指定字段

代码语言:javascript
复制
POST /my_doc/_analyze
{
  "analyzer": "standard",
  "field": "desc",
  "text": ["study in imooc"]
}

ES集成IK

下载

代码语言:javascript
复制
https://github.com/medcl/elasticsearch-analysis-ik/releases?page=7

安装

上传到Linux

代码语言:javascript
复制
# 解压到插件库下
unzip elasticsearch-analysis-ik-7.4.2.zip -d /usr/local/es/plugins/ik

重启es

ik集成完成

配置自定义字库

修改ik/config/IKAnalyzer.cfg.xml

代码语言:javascript
复制
vi IKAnalyzer.cfg.xml
代码语言:javascript
复制
vi cust.dic

再次执行分词

okk

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2022-10-03,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 分词器
    • 分词器汇总
      • 默认分词器
        • 在指定索引中分析指定字段
          • ES集成IK
            • 下载
            • 安装
          • 配置自定义字库
          相关产品与服务
          Elasticsearch Service
          腾讯云 Elasticsearch Service(ES)是云端全托管海量数据检索分析服务,拥有高性能自研内核,集成X-Pack。ES 支持通过自治索引、存算分离、集群巡检等特性轻松管理集群,也支持免运维、自动弹性、按需使用的 Serverless 模式。使用 ES 您可以高效构建信息检索、日志分析、运维监控等服务,它独特的向量检索还可助您构建基于语义、图像的AI深度应用。
          领券
          问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档