bellen

LV1
  • 原创分享签约作者

发表了文章

巧用ingest pipeline实现Elasticsearch索引的重定向

对于第1个问题,在7.x版本的集群中比较常见,因为所以默认只有1分片1副本,该问题的一种解决方式就是切换一个新的索引进行写入,提高新的索引的分片数量(最好保持为...

bellen
发表了文章

PB级大规模Elasticsearch集群运维与调优实践

某中型互联网公司的游戏业务,使用了腾讯云的Elasticsearch产品,采用ELK架构存储业务日志。因为游戏业务本身的日志数据量非常大(写入峰值在100w q...

bellen
发表了文章

基于SCF实现批量备份Elasticsearch索引到COS

在采用ELK架构的日志应用场景中,通常我们会按天或者按小时创建索引,从而避免单个索引的数据量太大。如果我们需要对过去一段时间的老索引进行冷备份,比如通过快照备份...

bellen
发表了文章

基于SCF实现Elasticsearch的快照生命周期管理(SLM)

在ES 7.4版本后,我们拥有了SLM(快照生命周期管理)的功能,但是只有X-PACK商业版才能使用该功能,快照生命周期管理的实现也比较简单,实际上就是制定计划...

bellen
发表了文章

总结最近半年对Elasticsearch开源项目的贡献

自从2019年对Elasticsearch项目提交过一次代码之后,开始逐渐关注社区里的新动态,并且尝试去解决一些看起来容易上手的issue,通过这个过程去理解源...

bellen
发表了文章

在线不停服迁移自建ES集群至腾讯云ES

在之前的文章Elasticsearch跨集群数据迁移之离线迁移中,我们介绍了如何在离线场景下把自建的ES集群或者在其它云厂商购买的ES集群迁移至腾讯云的ES, ...

bellen
发表了文章

记一次向Elasticsearch开源社区贡献代码的经历

在针对线上ES集群进行运维值班的过程中,有用户反馈使用自建的最新的7.4.2版本的ES集群,索引的normalizer配置无法使用了,怎么配置都无法生效,而之前...

bellen
Elasticsearch
发表了文章

记一次在线跨集群迁移ES数据

业务所有的服务器日志都是通过filebeat进行采集,然后写入到一个公共的ES集群中。因为当前使用的集群无法继续扩容了并且版本也较低(5.6.4), 所以需要把...

bellen
Elasticsearch
发表了文章

Elasticsearch数据迁移与集群容灾

如果是第一种场景,数据迁移过程中可以停止写入,可以采用诸如elasticsearch-dump、logstash、reindex、snapshot等方式进行数据...

bellen
Elasticsearch
发表了文章

Filebeat的Registry文件越来越大?

其中,access.log是业务主日志,按天进行滚动,日志文件最大为128MB, 当天日志超出128MB后也进行滚动,最多保留15个日志文件;滚动后的日志文件会...

bellen
发表了文章

Elasticsearch:执行同样的查询语句多次结果不一致?!

最近有用户让帮忙看一下一个诡异的问题,同样的一个查询语句,执行多次查询结果竟然不一致,查询结果中hits.total一会是30,一会为15,这是为什么呢?

bellen
ElasticsearchLucene/Solr
发表了文章

High cardinality下对持续写入的Elasticsearch索引进行聚合查询的性能优化

最近使用腾讯云Elasticsearch Service的用户提出,对线上的ES集群进行查询,响应越来越慢,希望能帮忙优化一下。

bellen
无服务器云函数ElasticsearchAPI
发表了文章

使用无服务器云函数同步COS对象存储的元信息到ES中

本文利用腾讯云提供的Serverless执行环境-无服务器云函数SCF解决了这一问题。

bellen
对象存储GitHubGit开源无服务器云函数
发表了文章

logstash在Elasticsearch中创建的默认索引模板问题

在ELK架构中,使用logstash收集服务器中的日志并写入到Elasticsearch中,有时候需要对日志中的字段mapping进行特殊的设置,此时可以通过自...

bellen
其他
发表了文章

使用filebeat收集ES集群运行日志和慢日志并写入到ES

Elasticsearch集群运行过程中,运行日志和慢日志能够帮助集群使用者迅速定位出现的问题。

bellen
Elasticsearch
关注了用户

mikezou

大数据基础产品团队,T4技术专家

1 文章1 回答14 关注者
发表了文章

Elasticsearch Rest Client实战

Elasticsearch官方推荐使用Java REST客户端连接集群并进行数据操作。

bellen
HTTPAPIJavaJSON
发表了文章

从对象存储服务同步数据到Elasticsearch

AWS的S3, 阿里云的OSS, 腾讯云的COS, 都是常见的对象存储服务。对象存储服务面向非结构化数据,支持通过HTTP/HTTPS协议访问,支持存入文本、图...

bellen
存储流计算服务
发表了文章

logstash input插件开发

logstash作为一个数据管道中间件,支持对各种类型数据的采集与转换,并将数据发送到各种类型的存储库,比如实现消费kafka数据并且写入到Elasticsea...

bellen
存储流计算服务
关注了用户

腾讯云时序数据库团队

专业打造企业级时序数据库CTSDB

20 文章1 回答56 关注者

个人简介

个人成就

  • 影响力总排行第 598 名
  • 原创分享签约作者
    • 原创分享签约作者

  • 获得 167 次赞同
  • 文章被阅读 58.8K 次
  • 文章获得 3 次首页推荐

扫码关注云+社区

领取腾讯云代金券