在ES中，涉及元信息主要有三种，分别为分片元信息、索引元信息、集群元信息（节点元信息），并且这些元信息会保留在磁盘上，这样在节点重启时即可从磁盘上读取对应元信息并恢复。

在腾讯云 与 Elasticsearch 合作三周年之际，双方共同发起《腾讯云 x Elasticsearch 携手三周年有奖征文大赛》，欢迎大家畅所欲言！可从ES相关技术科普、ES最佳实践案例、ES优化方向等基础研究创新的探索等维度讨论，只要是与【Elasticsearch Service】相关的技术产品干货内容，都可以参加此次活动，参与活动即可获得腾讯云 X Elasticsearch联名精美周边礼品，Apple Watch、Cherry机械键盘、京东卡等超级丰厚大礼等你来拿～

随着腾讯云ES集群稳定性越来越高、产品体验越来越好。有越来越多的外部客户希望将自建的ES集群迁移到腾讯云上来。本文将介绍一种腾讯云ES在业界独有的业务不停服无感知的迁移方案--在线融合迁移方案。本方案目前已经迁移了上百套客户自建ES集群上云。下面将结合我们在给客户迁移过程中总结出的宝贵经验，来详细介绍下在线融合迁移技术方案的基本原理、核心优势、迁移步骤和注意事项。

随着ELK方案在开源日志分析领域越来越流行，各种使用场景也给ELK方案带来了越来越多的挑战。本文将回顾一次真实客户案例，从使用姿势上，提供一些大集群、多日志主题场景下的集群优化思路。

cerebro 是一个基于 Scala、Play Framework、AngularJS和Bootstrap构建的开源ES可视化管理工具。虽然很多同学可能对其使用的部分语言较为生疏，但其优秀的代码风格、结构设计，可以较为容易地上手去做二次开发。笔者在平常使用cerebro管理ES集群时，发现并二次开发了一些可以强化的功能。下面分享下具体强化的功能点：

Elasticsearch 是一个实时的分布式搜索分析引擎，简称 ES。一个集群由多个节点组成，节点的角色可以根据用户的使用场景自由配置，集群可以以节点为单位自由扩缩容，数据以索引、分片的形式散列在各个节点上。本文介绍 ES 分布式架构基础原理，剖析分布式元数据管理模型，并介绍腾讯云 ES 在分布式扩展性层面相关的优化，解析代码基于 8.5 版本。

第一弹：11月8日内部征文开启！本次征文活动知识密度和奖品力度丰厚，欢迎大家积极参与分享您与腾讯云ES之间独有的故事~

在本文中，我们将给大家介绍如何在腾讯云上创建Fleet与Fleet Server。

Elasticsearch提供了多种数据访问安全的方式，如用户名密码校验、api_key等。但是依然无法保障数据传输过程中的安全性问题。而HTTPS协议，则是一种以安全为目的的HTTP通道，在HTTP的基础上通过传输加密和身份认证等机制来保障数据传输过程中的安全性。本文将基于腾讯云ES集群环境，演示Beats、Logstash、Kibana和Java Client等客户端访问连接开启了HTTPS协议的ES集群。

Elasticsearch作为一款基于Lucene打造的分布式搜索引擎，常用于搜索和日志场景，而在数据分析场景，Elasticsearch也提供了聚合Aggregations API支持完成复杂的查询分析，并且可以使用Kibana完成数据的可视化。本文就如何使用Elasticsearch进行数据分析做一个简单的介绍。

嗯，对于我们许多客户的用例和解决方案来说，索引吞吐量是最重要的关注点之一。我们花在摄取数据上的CPU时间越多，我们能达到的吞吐量就越少。

有一天收到告警，显示用于存储日志的es集群磁盘使用率超过了85%，因此登陆kibana进行一番查看，发现该集群有很多几个月之前的索引，直接DELETE filebeat-7.8.0-2021-*一把把所有的2021年的索引都清理掉，结果一看傻眼了，集群没索引了，很快创建出了一个名为filebeat-7.8.0的索引继续写入，这个索引名称是被删除的索引名如filebeat-7.8.0-2021.12.21-000001的别名，现在filebeat-7.8.0成为一个实体索引，后续索引也没法滚动了，ILM也执行不下去了。

Prometheus是一个开源的监测平台。Prometheus 是一款主要用于监测容器化工作负载的热门工具，它使用开放的、独立于供应商且基于文本的公开格式，从已装载测量工具的作业中收集时序数据。

OpenTelemetry是一个云原生计算基金会 (CNCF) 沙盒项目，它提供了供应商中立的、特定于语言的代理、SDK 和 API，您可以使用它们从所有受监控的应用程序中收集分布式跟踪、指标和日志数据。OpenTelemetry 代理能够自动检测应用程序代码以显示性能数据，这些数据对于帮助您了解服务的健康状况非常重要——为应用程序开发人员提供了选择和选择哪些代理监控其应用程序的灵活性。

OpenTelemetry是一个云原生计算基金会 (CNCF) 沙盒项目，它提供了供应商中立的、特定于语言的代理、SDK 和 API，您可以使用它们从所有受监控的应用程序中收集分布式跟踪、指标和日志数据。OpenTelemetry 代理能够自动检测应用程序代码以显示性能数据，这些数据对于帮助您了解服务的健康状况非常重要——为应用程序开发人员提供了选择和选择哪些代理监控其应用程序的灵活性。

今天（2022年5月25日）接国家网络与信息安全信息通报中心预警，开源Java开发组件fastjson存在反序列化漏洞。攻击者可利用上述漏洞实施任意文件写入、服务端请求伪造等攻击行为，造成服务器权限被窃取、敏感信息泄漏等严重影响。

在上一篇文章Elastic Stack最佳实践：7.10.1与7.14.2的性能比较中，我们列举了一些esrally压测的结果，用于帮助大家判断是否需要从7.10.1升级到7.14.2，在本文中，我们将顺着同一思路，在产品功能层面，列出7.10.1与7.14.2之间的不同，以为大家提供更多信息。

说起开源的日志分析系统，ELK几乎无人不晓，这个生态并非是Elastic特意而为，毕竟Elasticsearch的初心是分布式的搜索引擎，被广泛用作日志系统纯粹一个“美丽的意外”，这是社区使用者推动而成。而现在各大云厂商推广自己的日志服务时，也往往将各种指标对标于ELK，可见其影响之广。

从事Elasticsearch云产品的研发已经四年多了，在服务公有云客户的过程中也遇到了各种各样的使用方式以及问题，本文就把过去几年记录的一些问题和解决办法进行归类和总结，常读常新。