腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

IT技术精选文摘

专栏作者

542

文章

765628

阅读量

136

订阅数

Kafka 的 Topic 为什么要分区？「豌豆射手」告诉你！

kafka 分布式

今天通过植物大战僵尸这款游戏来讲解 Kafka 的 Topic 分区的作用，希望能够帮助到大家。

2022-05-23

5780

Kafka 精妙的高性能设计（下篇）

在上一篇文章中，指出了高性能设计的两个关键维度：计算和 IO，可以将它们理解成「道」。同时给出了 Kafka 高性能设计的全景图，可以理解成「术」。

2022-04-08

1770

《我想进大厂》之kafka夺命连环11问

kafka zookeeper node.js 数据处理

kafka是一个流式数据处理平台，他具有消息系统的能力，也有实时流式数据处理分析能力，只是我们更多的偏向于把他当做消息队列系统来使用。

2022-04-08

2890

Kafka性能篇：为何Kafka这么"快"？

kafka 分布式

以讲解性能作为 Kafka 之旅的开篇之作，让我们一起来深入了解 Kafka “快”的内部秘密。你不仅可以学习到 Kafka 性能优化的各种手段，也可以提炼出各种性能优化的方法论，这些方法论也可以应用到我们自己的项目之中，助力我们写出高性能的项目。

2022-04-08

5790

Kafka 精妙的高性能设计（上篇）

Kafka 的高性能设计可以说是全方位的，从 Prodcuer 、到 Broker、再到 Consumer，Kafka 在掏空心思地优化每一个细节，最终才做到了这样的极致性能。

2022-04-08

2350

Kafka 架构设计

kafka 架构设计压力测试

把握住了这个关键点，我相信你将能更好地理解 Kafka 的架构设计，进而顺藤摸瓜地掌握 Kafka 的核心技术方案。

2022-04-08

2970

《浅入浅出》-Kafka

消息队列 CMQ 版 kafka https 网络安全

在收集资料学习的时候，已经发现有不少的前辈对官网的介绍进行翻译和总结了，所以我这里就不重复了，贴下地址大家自行去学习啦：

2022-04-08

3610

Redis 使用 List 实现消息队列可靠么？

云数据库 Redis rabbitmq kafka 消息队列 CMQ 版

分布式系统中必备的一个中间件就是消息队列，通过消息队列我们能对服务间进行异步解耦、流量消峰、实现最终一致性。

2022-02-15

3090

查漏补缺，Kafka 核心知识，总有一个拨动你的心弦

zookeeper kafka node.js 文件存储

kafka是一个流式数据处理平台，他具有消息系统的能力，也有实时流式数据处理分析能力，只是我们更多的偏向于把他当做消息队列系统来使用。

2021-12-27

2280

Kafka原理篇：图解kakfa架构原理

zookeeper kafka

今天我们来深入讲解 Kafka 的架构和实现原理。本文将从架构和细节入手，以生动的图深入讲解 Kafka 的实现原理。

2021-12-09

3270

Kafka 为什么要放弃 Zookeeper

zookeeper 分布式 kafka 消息队列 CMQ 版数据处理

最近，confluent社区发表了一篇文章，主要讲述了Kafka未来的2.8版本将要放弃Zookeeper，这对于Kafka用户来说，是一个重要的改进。之前部署Kafka就必须得部署Zookeeper，而之后就只要单独部署Kafka就行了。[1]

2021-11-23

5990

面试题:如何保证消息不被重复消费？

数据库 sql 云数据库 Redis kafka 消息队列 CMQ 版

其实这是很常见的一个问题，这俩问题基本可以连起来问。既然是消费消息，那肯定要考虑会不会重复消费？能不能避免重复消费？或者重复消费了也别造成系统异常可以吗？这个是 MQ 领域的基本问题，其实本质上还是问你使用消息队列如何保证幂等性，这个是你架构里要考虑的一个问题。

2019-06-11

7.9K0

微信后台异步消息队列的优化升级实践分享

微信 mapreduce 消息队列 CMQ 版 kafka 任务调度

1、引言 MQ 异步消息队列是微信后台自研的重要组件，广泛应用在各种业务场景中，为业务提供解耦、缓冲、异步化等能力。本文分享了该组件2.0版本的功能特点及优化实践，希望能为类似业务（比如移动端IM系

2018-06-22

1.3K3

大型互联网系统的监控流水线

zabbix kafka Elasticsearch Service

大型互联网的系统一般会架构散布于多个数据中心和一些私有/公有云，由真实物理机以及虚拟机组成。架构中部署的关键工具包括实现报警的Zabbix，以及一个采集、聚合和存储度量的六阶段流水线。流水线主要由开源

2018-04-08

1.5K0

Kafka消费者架构

kafka 编程算法 hadoop

Kafka消费者组您可以通过用例或功能将消费者组合成消费者组。一个消费者组可能负责将记录传送到高速的、基于内存的微服务，而另一个消费者组将这些记录传输到Hadoop。消费者组有自己的名称以便于从其它消费者组中区分出来。消费者组具有唯一的ID。每个消费者组是一个或多个Kafka主题的订阅者。每个消费者组维护其每个主题分区的偏移量。如果您需要多个订阅者，那么您有多个消费者组。一个记录只交付给消费者组中的一个消费者。消费者组中的每个消费者处理记录，并且该组中只有一个消费者将获得相同的记录。消费组内的

2018-01-30

1.4K0

分布式消息队列

消息队列 CMQ 版 kafka java 日志数据分布式

一、消息队列概述消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题。实现高性能，高可用，可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。目前在生产环境，使用较多的消息队列有ActiveMQ，RabbitMQ，ZeroMQ，Kafka，MetaMQ，RocketMQ等。二、消息队列应用场景以下介绍消息队列在实际应用中常用的使用场景。异步处理，应用解耦，流量削锋和消息通讯四个场景。 2.1异步处理场景说明：用户注册后，需要发注册邮件和注册短信。传统的做法有两种

2018-01-30

2.8K0

没有更多了

社区活动

RAG七天入门训练营

鹅厂大牛手把手带你上手实战，赢鹅厂证书、公仔好礼！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态