腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

腾讯云中间件专家服务

专栏作者

58

文章

94788

阅读量

47

订阅数

ckafka、Pulsar、TDMQ RocketMQ 版、TDMQ RabbitMQ 版和TDMQ CMQ 版功能上有啥区别

消息队列 CKafka 版消息队列 TDMQ 消息队列 CMQ 版

ckafka、TDMQ Pulsar版、TDMQ RocketMQ 版、TDMQ RabbitMQ 版和TDMQ CMQ 版功能上有啥区别

2022-04-25

3.4K1

巡检项：开启Ckafka跨可用区部署

消息队列 CKafka 版

CKafka 专业版支持跨可用区部署，在拥有3个或3个以上可用区的地域购买 CKafka 实例时，可以任选其中两个可用区购买跨可用区实例。该实例分区副本会强制分布在两个可用区节点上，这种部署方式能够让您的实例在单个可用区不可用情况下仍能正常提供服务。目前，仅专业版支持跨可用区部署，标准版无法支持。

2022-03-24

8500

巡检项：开启Ckafka跨可用区部署

私有网络 kafka 消息队列 CKafka 版

CKafka 专业版支持跨可用区部署，在拥有3个或3个以上可用区的地域购买 CKafka 实例时，可以任选其中两个可用区购买跨可用区实例。该实例分区副本会强制分布在两个可用区节点上，这种部署方式能够让您的实例在单个可用区不可用情况下仍能正常提供服务。目前，仅专业版支持跨可用区部署，标准版无法支持。

2022-03-24

7330

自建kafka迁移到云上Ckafka整体方案

消息队列 CKafka 版架构设计

3. CKafka 消费端新起消费者，配置新的 CKafka 集群的 bootstrap-server，消费新的 CKafka 集群。

2021-12-03

1.6K0

Ckafka 实现跨可用区容灾部署案例

消息队列 CKafka 版

CKafka 专业版支持跨可用区部署，在拥有3个或3个以上可用区的地域购买 CKafka 实例时，可以任选其中两个可用区购买跨可用区实例。该实例分区副本会强制分布在两个可用区节点上，这种部署方式能够让您的实例在单个可用区不可用情况下仍能正常提供服务。

2021-11-12

1.3K0

关注专栏作者，随时接收最新技术干货

腾讯技术

腾讯中间件技术咨询工程师

kafka压测工具及实践指南

消息队列 CKafka 版

并发压测topic所有partition，比如topic ods_finder_log_19501_sec_i 总共300个partition，用20台机器压测，每台机器启动15个进程，每个进程分配一个partition

2021-08-26

7510

容灾案例：Kafka集群快速扩容的方案总结

系统架构消息队列 CKafka 版

熟悉Apache Kafka的同学都知道，当Kafka集群负载到达瓶颈或者出现突发流量需要紧急扩容时，新加入集群的节点需要经过数据迁移才能均分集群压力。而数据迁移会因为数据堆积量，节点负载等因素的影响，导致迁移时间较长，甚至出现迁移不动的情况。同时数据迁移也会增大当前节点的压力，可能导致集群进一步崩溃。

2021-08-20

1.2K0

消息中间件之Kafka集群跨区容灾迁移实践案例

架构设计消息队列 CKafka 版

Kafka作为当今一款最为流行的高性能消息中间件，确保其高可用性并具备跨区容灾能力是很多企业运维人员的职责之一。现在我们将我们平时帮客户做kafka集群跨区容灾迁移实践经验分享给大家，供参考。

2021-08-20

1.6K2

中间件PaaS层组件容灾方案及实践

es 消息队列 CKafka 版 kafka tcp/ip 云数据库 Redis

当下，随着数字化技术不断深入，愈来愈多企业将核心业务搬到线上。业务系统高可用、可扩展、容灾能力决定企业系统的连续性，中间件作为构建企业核心系统的重要组成部分，其高可用容灾能力也将决定应用系统的。本文结合腾讯云中间件各PaaS产品的容灾能力及实践，以一个行业头部客户业务容灾实践举例，来展开说明基于腾讯云中间件PaaS层相关产品的实践。

2021-05-31

4.1K12

Serverless ETL应用案例

kafka 云函数消息队列 CKafka 版 serverless node.js

许多大型的电商系统，直播系统，流媒体系统，每天都会产生大量的数据，包括不仅限于交流，交易、浏览等等，这些行为会产生大量的数据，当这些数据源产生数据后，需要有一个组件获取数据源的数据，将数据写到 kafka，在传统的解决办法中，一是通过 Lofstash、Filebeat 等开源的数据存储方案处理，二是自己写代码实现这种逻辑。开始数据量小的时候还可以，随着业务的不断扩张，数据越来越大，为了保障可用性、可靠性以及性能相关的内容，需要大量的研发资源投入，因此，亟待新的解决方案支持。

2021-01-04

1.2K0

手把手教学--从Pulsar到TDMQ

消息队列 CMQ 版消息队列 CKafka 版

导语：介于TDMQ还没有公网的访问功能，不可能买台CVM安装windows吧，VPN又只能支持协议类型：IKE/IPsec，意思是企业用户才能用，对于个人就只能再想办法了，但办法总比问题多。本地开发测试环境使用pulsar的单机版，生产使用TDMQ，这样怎么样，一起来看看怎么配置。

2020-12-04

1.3K2

CKafka实践之Flume接入Ckafka

消息队列 CKafka 版

导语：当你的业务系统既要对实时数据进行处理也要对离线数据进行分析时，这时候可以来了解一下Flume。

2020-11-27

7200

CKafka实践之Filebeat生产者对接

消息队列 CKafka 版

导语：用CKafka作一个消息缓冲，用Filebeat收集日志，然后将日志传到Ckafka中。

2020-11-27

8400

云上消息队列Ckafka它香不香？

消息队列 CKafka 版消息队列 CMQ 版

导语：对于企业来说，使用消息队列kafka主要要求的是高可用、扩展性、易维护、重要的是省钱。

2020-11-23

1.6K0

ckafka消费慢的通用排查方法

消息队列 CKafka 版消息队列 CMQ 版

ckafka消费慢是用户经常遇到的问题，消费慢直接体现为消息堆积数上升，消息堆积数上升意味这消费者没有及时消费到消息，依赖消费者的下游应用就可能堵塞。因此，在观测到ckafka消费慢后及时进行有效排查、定位问题，用于降低消费慢对业务的影响，是很有必要的。

2020-11-15

1.7K0

通过配置ACL网段来控制Ckafka的访问策略

消息队列 CKafka 版消息队列 CMQ 版

Ckafka的访问限制是一个常见的需求，特别是开通了公网访问的实例。这个功能主要使用ACL来实现。ACL是Ckafka安全模块的一部分，在介绍ACL配置之前，会简单介绍一下Ckafka的安全模块。

2020-10-28

1K0

腾讯云消息队列Ckafka和TDMQ选型问题

消息队列 CKafka 版消息队列 CMQ 版

目前随着技术架构不断演进，特别是微服务分布式技术兴起，很多大型网站逐步采用分布式的消息队列，用于面对流量高峰和异步处理，基于云上的消息队列逐步成为主流，接下来给大家一起介绍下腾讯云消息队列Ckafka及新推出的TDMQ相关产品特性、使用场景，以及系统对接，帮助大家更好做好技术选型。

2020-10-23

8.3K1

Ckafka消费者组反复重平衡问题解决之道

消息队列 CKafka 版

Ckafka 消费重平衡机制同开源kafka一样，就是让一个消费者组下所有的 Consumer 实例就如何消费订阅主题的所有分区达成共识的过程。在重平衡过程中，所有 Consumer 实例共同参与，在协调者组件的帮助下，完成订阅主题分区的分配。但是，在整个过程中，所有实例都不能消费任何消息，会影响到我们业务消息的正常消费。

2020-10-21

3.5K0

没有更多了

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态