Java 技术栈-腾讯云开发者社区

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

Java 技术栈

分享技术知识，提升内功心法

专栏成员

165

文章

163398

阅读量

36

订阅数

Kafka 高性能之 Page Cache 的应用哲学

日志索引存储 kafka 高性能

Kafka 的消息存储会按照该 Topic 的 Partition 进行保存，即每个 Partition 都有属于自己的日志，在 Kafka 中被称为分区日志（partition log）。

2024-07-04

1130

消息队列的 6 种经典使用场景和 Kafka 架构设计原理详细解析

架构设计 kafka 系统消息队列原理

我是码哥，可以叫我靓仔。今天来聊一聊 Kafka 消息队列的使用场景和核心架构实现原理，帮助你全面了解 Kafka 其内部工作原理和设计理念。。

2024-05-28

1.5K0

Kafka Consumer 消费消息和 Rebalance 机制

kafka 配置数据网络序列化

Kafka 有消费组的概念，每个消费者只能消费所分配到的分区的消息，每一个分区只能被一个消费组中的一个消费者所消费，所以同一个消费组中消费者的数量如果超过了分区的数量，将会出现有些消费者分配不到消费的分区。消费组与消费者关系如下图所示：

2024-03-20

3950

Kafka Producer 发送消息至 Broker 原理和高性能必备参数设置

数据压缩原理 kafka 高性能

Producer 发送消息的过程如下图所示，需要经过拦截器，序列化器和分区器，最终由累加器批量发送至 Broker。

2024-03-20

2950

kafka 三高架构设计剖析

kafka 服务管理架构架构设计

Producer、Consumer、Consumer Group、Topic、Partition

2024-03-20

960

进字节了，Kafka 为什么这么快？

网络 kafka 磁盘内核数据

『码哥』的 Redis 系列文章有一篇讲透了 Redis 的性能优化 ——《Redis 核心篇：唯快不破的秘密》。

2024-03-02

1530

Kafka 核心全面总结，高可靠高性能核心原理探究

kafka 高性能数据索引原理

你好，我是码哥，可以叫我靓仔作者：mo 引言在探究 Kafka 核心知识之前，我们先思考一个问题：什么场景会促使我们使用 Kafka? 说到这里，我们头脑中或多或少会蹦出异步解耦和削峰填谷等字样

2023-08-23

5810

探秘 Kafka 的内部机制原理

kafka 配置事务数据原理

kafka是一个分布式消息队列。具有高性能、持久化、多副本备份、横向扩展能力。生产者往队列里写消息，消费者从队列里取消息进行业务逻辑。一般在架构设计中起到解耦、削峰、异步处理的作用。

2023-08-22

3730

硬核 | Redis Pub/Sub 发布订阅与宅男有什么关系？

消息队列 CMQ 版 kafka 云数据库 Redis 编程算法

像这种 65 哥通过朋友圈发布消息，关注 65 哥的好友能收到通知的场景叫做「发布/订阅机制」。

2022-10-28

8550

别再用 Redis List 实现消息队列了，Stream 专为队列而生

kafka 消息队列 CMQ 版云数据库 Redis https 网络安全

Stream 是 Redis 5.0 引入的一种专门为消息队列设计的数据类型，Stream 是一个包含 0 个或者多个元素的有序队列，这些元素根据 ID 的大小进行有序排列。

2022-04-08

7750

Redis 使用 List 实现消息队列的利与弊

云数据库 Redis 消息队列 CMQ 版 java kafka api

分布式系统中必备的一个中间件就是消息队列，通过消息队列我们能对服务间进行异步解耦、流量消峰、实现最终一致性。

2022-02-25

1.7K0

SpringBoot与RabbitMQ详解与整合

rabbitmq 消息队列 CMQ 版 kafka tcp/ip html

Direct Exchange是RabbitMQ默认的交换机模式，也是最简单的模式，根据key全文匹配去寻找队列。

2021-07-27

6960

Kafka原理篇：图解kakfa架构原理

kafka zookeeper 编程算法

这是[码哥]Kafka 系列文章的第二篇，码哥将从原理、实践和源码角度为大家深入剖析并实践 Kafka。此系列包括[原理篇]、[实践篇]和[源码篇]。这篇是[原理篇]的第二篇，主要讲解 Kafka 的架构和实现原理。

2021-04-23

6820

Kafka性能篇：为何Kafka这么"快"？

kafka 自动驾驶文件存储数据结构云数据库 Redis

『码哥』的 Redis 系列文章有一篇讲透了 Redis 的性能优化 ——《Redis 核心篇：唯快不破的秘密》。深入地从 IO、线程、数据结构、编码等方面剖析了 Redis “快”的内部秘密。65 哥深受启发，在学习 Kafka 的过程中，发现 Kafka 也是一个性能十分优秀的中间件，遂要求『码哥』讲一讲 Kafka 性能优化方面的知识，所以『码哥』决定将这篇性能方面的博文作为 Kafka 系列的开篇之作。

2021-04-08

4970

Kafka核心原理的秘密，藏在这 17 张图中

Kafka 是一个优秀的分布式消息中间件，许多系统中都会使用到 Kafka 来做消息通信。对分布式消息系统的了解和使用几乎成为一个后台开发人员必备的技能。今天码哥字节就从常见的 Kafka 面试题入手，和大家聊聊 Kafka 的那些事儿。

2020-10-27

8790

Druid：通过 Kafka 加载流数据

本教程演示了如何使用 Druid 的 Kafka indexing 服务从 Kafka 流中加载数据至 Druid。

2020-06-02

1.8K0

没有更多了

社区活动

【纪录片】中国数据库前世今生

穿越半个世纪，探寻中国数据库50年的发展历程

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态