大数据生态-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

大数据生态

本专栏为您分享各种大数据技术和实践经验，无论您是初学者还是资深从业者，都能在这里找到丰富的知识资源和实践分享。

专栏成员

123

文章

222307

阅读量

375

订阅数

Elasticsearch 缩减索引的分片个数「Index Shrink」

大数据解决方案 es Elasticsearch Service elasticsearch elk

本文描述问题及解决方法同样适用于腾讯云 Elasticsearch Service（ES）。

2024-08-31

1100

Elasticsearch快照(snapshot)备份原理及分析

Elasticsearch Service snapshot

Snapshot是Elasticsearch提供的一种将集群数据备份至远程存储库的功能。例如将数据备份至S3，HDFS，共享文件系统等。

空洞的盒子

2024-08-02

8171

腾讯云 ES 8 向量化语义混合检索一站式体验指南

大数据 es Elasticsearch Service 语义分析

本文描述问题及解决方法同样适用于腾讯云 Elasticsearch Service（ES）。

2024-07-30

2611

Elasticsearch7.14版本集群架构升级之冷热集群

Elasticsearch Service

具备主节点角色，拥有控制集群的权限。当节点被授予该角色时，则表明该节点有资格被选举为主节点。

空洞的盒子

2024-07-24

2921

Prometheus+Alertmanager进行飞书机器人webhook告警

Prometheus 监控服务

Alertmanager 是 Prometheus 生态系统中的一个核心组件，负责处理由 Prometheus 服务器发送的告警通知。其主要功能包括告警的去重、分组、抑制、和路由到不同的通知接收端（如邮件、Slack、PagerDuty 等）。本文中，我们主要使用webhook用于接收Alertmanager发出的告警。

空洞的盒子

2024-07-16

5070

关注专栏作者，随时接收最新技术干货

腾讯大数据SRE研发工程师

卡奥斯产品经理

「EMR 开发指南」之 Hue 配置工作流

emr workflow 弹性 MapReduce hadoop

本文将通过一个简单，并且具有典型代表的例子，描述如何使用EMR产品中的Hue组件创建工作流，并使该工作流每天定时执行。

2024-06-30

1751

kibana因系统索引丢失导致访问异常的问题

kibana es elasticsearch

本文描述问题及解决方法同样适用于腾讯云 Elasticsearch Service（ES）。

2024-05-31

1910

「最佳实践」腾讯云 ES 8 向量化语义混合检索测试指南

es Elasticsearch Service elasticsearch elk 向量数据库

本文描述问题及解决方法同样适用于腾讯云 Elasticsearch Service（ES）。

2024-04-11

72111

「EMR 开发指南」之 Sqoop 常见问题处理

大数据 sqoop 弹性 MapReduce 大数据解决方案 hadoop

Sqoop是一种用于在Apache Hadoop和结构化数据存储（如关系数据库）之间传输数据的开源工具。它允许用户在Hadoop分布式文件系统（HDFS）和外部结构化数据存储之间进行数据导入和导出操作。Sqoop的主要优势在于，它可以有效地将大量数据从关系数据库迁移到Hadoop环境中，以便进行大数据分析和处理。

2024-03-01

4130

Docker的资源隔离(NameSpace)

Docker通过namespace(命名空间)实现资源隔离。Namespace是Linux系统提供的资源隔离机制，只有在同一个namespace下的进程可以互相联系，但无法感受外部进程的存在，从而实现资源隔离。

空洞的盒子

2024-02-28

4620

「最佳实践」借助网关双写，实现 Elasticsearch 的无缝在线迁移

大数据解决方案大数据架构设计 Elasticsearch Service elasticsearch

本文描述问题及解决方法同样适用于腾讯云 Elasticsearch Service（ES）。

2024-02-23

8756

「最佳实践」腾讯云 Elasticsearch 8 向量化语义检索：使用自建 GPU 机器学习节点进行高效推理

elasticsearch 2024腾讯·技术创作特训营第五期大数据解决方案 es Elasticsearch Service

本文描述问题及解决方法同样适用于腾讯云 Elasticsearch Service（ES）。

2024-01-16

2K28

「最佳实践」腾讯云 Elasticsearch 8：预训练模型与一站式向量化语义检索的完美结合

Elasticsearch Service elasticsearch 语义分析 2023腾讯·技术创作特训营第四期大数据解决方案

本文描述问题及解决方法同样适用于腾讯云 Elasticsearch Service（ES）。

2023-12-28

2.2K16

【2023腾讯·技术创作特训营】第四期发文挑战赛来袭，一起来慧眼识好文

腾讯云开发者社区 2023腾讯·技术创作特训营第四期

大家好，为了帮助大家持续提升创作能力，腾讯云开发者社区【2023腾讯·技术创作特训营】最新一期有奖征文来袭啦~

2023-12-01

57025

AWS/华为云Opensearch到Elasticsearch迁移方案

2023腾讯·技术创作特训营第四期 aws elasticsearch

Elasticdump工具只能同步index mapping，settings无法同步。

2023-12-01

4610

「EMR 开发指南」之 Oozie 作业调度

2023腾讯·技术创作特训营第三期 mapreduce 大数据 emr oozie

本文将使用oozie组件自带的例子，详细介绍如何在oozie workflow上提交一个MapReduce jar。本文以oozie 4.3.1版本为例。

2023-11-30

1700

「EMR 开发指南」之 Kylin 存算分离方案

2023腾讯·技术创作特训营第三期 hadoop 大数据 emr apache kylin

在大数据领域，数据量持续增长，数据类型和来源也变得越来越复杂。传统的数据仓库和分析工具很难满足大规模数据处理和实时分析的需求。为了解决这些问题，Apache Kylin应运而生。

2023-11-29

3691

「EMR 运维指南」之 Kylin 迁移方案

hadoop 大数据 emr apache kylin 2023腾讯·技术创作特训营第三期

在大数据领域，数据量持续增长，数据类型和来源也变得越来越复杂。传统的数据仓库和分析工具很难满足大规模数据处理和实时分析的需求。为了解决这些问题，Apache Kylin应运而生。

2023-11-28

4481

Pipelines使用

Elasticsearch Service kibana pipeline 2023腾讯·技术创作特训营第三期

在Kibana的Stack Management > Ingest Node Pipelines路径下可以

2023-11-28

2120

「EMR 开发指南」之 Kylin 快速构建 Cube

大数据 emr apache kylin cube 2023腾讯·技术创作特训营第三期

在大数据领域，数据量持续增长，数据类型和来源也变得越来越复杂。传统的数据仓库和分析工具很难满足大规模数据处理和实时分析的需求。为了解决这些问题，Apache Kylin应运而生。

2023-11-27

3580

点击加载更多

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态