默认模板说明
索引模板是预先定义好的在创建新索引时自动应用的模板,主要包括索引设置、映射和模板优先级等配置。腾讯云 ES 在集群创建时提供了一个默认的索引模板,您可以在控制台内选择 ES 集群管理 ,点击对应集群操作列的 Kibana 按钮,进入 Kibana 界面,并在左侧的 Management 中选择 Dev Tools,通过命令 GET _template/default@template 查看这个模板。下面是默认模板及其中配置的一些说明,可以根据需求适当调整这些配置。
{"default@template": {"order": 1, // 模板优先级,数值越大优先级越高"index_patterns": [ // 模板应用的索引"*"],"settings": {"index": {"max_result_window": "65536", // 最大查询窗口,如果查询的窗口超过该大小,会报 Result window is too large 错误,需要调大这个配置"routing": {"allocation": {"include": {"temperature": "hot"}}},"refresh_interval": "30s", // 索引刷新间隔,被索引的文档在该间隔后才能被查询到,如果对于查询实时性要求较高,可以适当调小该值,但是值过小将影响写入性能"unassigned": {"node_left": {"delayed_timeout": "5m"}},"translog": {"sync_interval": "5s", // translog 刷盘间隔,值过小将影响写入性能"durability": "async"},"number_of_replicas": "1" // 副本分片数}},"mappings": {"_default_": {"_all": {"enabled": false // 建议禁用,_all 字段会包含所有其他字段形成一个大字符串,会占用较多磁盘空间,也会影响写入性能},"dynamic_templates": [ // 动态模板{"message_full": { // 将名为 message_full 的字段动态映射为 text 和 keyword 类型"match": "message_full","mapping": {"type": "text","fields": {"keyword": {"type": "keyword","ignore_above": 2048}}}}},{"message": { // 将名为 message 的字段动态映射为 text 类型"match": "message","mapping": {"type": "text"}}},{"strings": { // 将 string 类型字段动态映射为 keyword 类型"match_mapping_type": "string","mapping": {"type": "keyword"}}}]}},"aliases": {}}}
模板调整
在 Kibana 界面的 Dev Tools 中通过命令
PUT _template/my_template
自定义自己的索引模板,并通过设置模板优先级order
的数值大于默认模板优先级,来覆盖默认的索引模板中的配置。注意
索引模板仅在索引创建时应用,因此模板调整不会对已有的索引产生影响。
调整主分片个数
在 Elasticsearch 5.6.4版本和6.4.3版本中,默认的索引主分片个数为5个。对于数据规模较小、索引个数较多的场景,建议调小主分片个数,以减轻索引元数据对堆内存的压力。您可以参考下面模板调整主分片个数:
{"index_patterns" : ["*"],"order" : 2, // 请确保模板中 order 字段的值大于1 order表示模板的优先级,值越大表示优先级越高"settings" : {"index": {"number_of_shards" : 1 number_of_shards表示索引的分片数}}}
调整字段类型
在默认模板中,我们将 string 类型字段动态映射为 keyword 类型,以防止对所有文本类型数据都进行全文索引。您可以根据业务需求,修改指定 string 类型字段为 text,使其可以全文索引。
{"index_patterns" : ["*"],"order" : 2, // 请确保模板中 order 字段的值大于1"mappings": {"properties": {"字段名": {"type": "text" //type表示字段的数据类型}}}}
其他业务场景
例如,您希望让索引的文档在10s之后就能被搜索到,并应用于所有的
search-*
索引,那么您可以新建一个如下的模板:{"index_patterns" : ["search-*"],"order" : 2, // 请确保模板中 order 字段的值大于1 order表示模板的优先级,值越大表示优先级越高"settings" : {"index": {"refresh_interval": "10s"}}}