前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >ES索引管理详解

ES索引管理详解

作者头像
Linux运维技术之路
发布2024-02-29 15:00:28
1270
发布2024-02-29 15:00:28
举报

一、索引管理的引入

我们在前文中增加文档时,如下的语句会动态创建一个customer的index:

代码语言:javascript
复制
PUT /customer/_doc/1
{
  "name": "John Doe"
}

而这个index实际上已经自动创建了它里面的字段(name)的类型。我们不妨看下它自动创建的mapping:

代码语言:javascript
复制
{
  "mappings": {
    "_doc": {
      "properties": {
        "name": {
          "type": "text",
          "fields": {
            "keyword": {
              "type": "keyword",
              "ignore_above": 256
            }
          }
        }
      }
    }
  }
}

那么如果我们需要对这个建立索引的过程做更多的控制:比如想要确保这个索引有数量适中的主分片,并且在我们索引任何数据之前,分析器和映射已经被建立好。那么就会引入两点:第一个禁止自动创建索引,第二个是手动创建索引。

  • 禁止自动创建索引

可以通过在 config/elasticsearch.yml 的每个节点下添加下面的配置:

代码语言:javascript
复制
action.auto_create_index: false

手动创建索引就是接下来文章的内容。

二、索引的格式

在请求体里面传入设置或类型映射,如下所示:

代码语言:javascript
复制
PUT /my_index
{
    "settings": { ... any settings ... },
    "mappings": {
        "properties": { ... any properties ... }
    }
}
  • settings: 用来设置分片,副本等配置信息
    • properties: 由于type在后续版本中会被Deprecated, 所以无需被type嵌套
    • mappings
    • 字段映射,类型等

三、索引管理操作

我们通过kibana的devtool来学习索引的管理操作。

创建索引

我们创建一个user 索引test-index-users,其中包含三个属性:name,age, remarks; 存储在一个分片一个副本上。

代码语言:javascript
复制
PUT /test-index-users
{
  "settings": {
		"number_of_shards": 1,
		"number_of_replicas": 1
	},
  "mappings": {
    "properties": {
      "name": {
        "type": "text",
        "fields": {
          "keyword": {
            "type": "keyword",
            "ignore_above": 256
          }
        }
      },
      "age": {
        "type": "long"
      },
      "remarks": {
        "type": "text"
      }
    }
  }
}

执行结果

  • 插入测试数据

查看数据

  • 我们再测试下不匹配的数据类型(age):
代码语言:javascript
复制
POST /test-index-users/_doc
{
  "name": "test user",
  "age": "error_age",
  "remarks": "hello eeee"
}

你可以看到无法类型不匹配的错误:

修改索引

查看刚才的索引,curl 'localhost:9200/_cat/indices?v' | grep users

代码语言:javascript
复制
yellow open test-index-users                          LSaIB57XSC6uVtGQHoPYxQ 1 1     1    0   4.4kb   4.4kb

我们注意到刚创建的索引的状态是yellow的,因为我测试的环境是单点环境,无法创建副本,但是在上述number_of_replicas配置中设置了副本数是1;所以在这个时候我们需要修改索引的配置。

修改副本数量为0

代码语言:javascript
复制
PUT /test-index-users/_settings
{
  "settings": {
    "number_of_replicas": 0
  }
}

再次查看状态:

代码语言:javascript
复制
green open test-index-users                          LSaIB57XSC6uVtGQHoPYxQ 1 1     1    0   4.4kb   4.4kb

四、打开/关闭索引

  • 关闭索引

一旦索引被关闭,那么这个索引只能显示元数据信息,不能够进行读写操作。

当关闭以后,再插入数据时:

  • 打开索引

打开后又可以重新写数据了

删除索引

最后我们将创建的test-index-users删除。

代码语言:javascript
复制
DELETE /test-index-users

查看索引

由于test-index-users被删除,所以我们看下之前bank的索引的信息

  • mapping
代码语言:javascript
复制
GET /bank/_mapping
  • settings
代码语言:javascript
复制
GET /bank/_settings

五、Kibana管理索引

在Kibana如下路径,我们可以查看和管理索引

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2024-02-24,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 Linux运维技术之路 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 二、索引的格式
  • 三、索引管理操作
    • 创建索引
      • 修改索引
        • 四、打开/关闭索引
          • 删除索引
            • 查看索引
            • 五、Kibana管理索引
            相关产品与服务
            Elasticsearch Service
            腾讯云 Elasticsearch Service(ES)是云端全托管海量数据检索分析服务,拥有高性能自研内核,集成X-Pack。ES 支持通过自治索引、存算分离、集群巡检等特性轻松管理集群,也支持免运维、自动弹性、按需使用的 Serverless 模式。使用 ES 您可以高效构建信息检索、日志分析、运维监控等服务,它独特的向量检索还可助您构建基于语义、图像的AI深度应用。
            领券
            问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档