腾讯云

文章/答案/技术大牛

发布

社区首页 >问答首页 >为什么Kafka的吞吐量比Redis高？

问为什么Kafka的吞吐量比Redis高？
EN

Stack Overflow用户

提问于 2021-10-14 08:49:09

回答 1查看 58关注 0票数 0

研究表明，与redis相比，当Kafka和redis都充当消息代理时，Kafka在每秒的msgs数和每秒传输的mbs数方面都有更好的吞吐量。

最近一项名为“实时流处理管道中数据摄取平台的比较”的研究表明，对于1kB的有效负载，kafka可以处理的请求量是redis的3倍。

到底是什么让Kafka作为消息代理比redis更强大/更快呢？

apache-kafka

redis

messagebroker

回答 1

Stack Overflow用户

发布于 2021-10-14 19:48:16

Kafka的吞吐量性能基于生产者数量、消费者数量和复制方法的组合。如果你需要更多信息，我建议你看看this article。

票数 2

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/69574508

复制

为什么kafka延迟比rocketmq延迟高

kafka 存储 apache

说kafka延迟比rocketmq延迟高是有一个前提的就是topic较多的时候这个和这2个MQ的数据存储结构有关系的在topic少的时候延迟基本一致。

JavaEdge

2022/11/20

1.2K0

高吞吐量消息系统—kafka

node.js kafka 消息队列 CMQ 版大数据 api

现在基本上大数据的场景中都会有kafka的身影，那么为什么这些场景下要用kafka而不用其他传统的消息队列呢？例如rabbitmq。主要的原因是因为kafka天然的百万级TPS，以及它对接其他大数据组件的流处理功能，比如可以更好的对接Apache storm。本文只是讨论kafka作为消息队列的功能及一些用法。

用户2937493

2020/08/14

6760

Kafka为什么吞吐量大、速度快？

kafka 文件存储 socket编程 node.js 缓存

Kafka是大数据领域无处不在的消息中间件，目前广泛使用在企业内部的实时数据管道，并帮助企业构建自己的流计算应用程序。

用户4283147

2022/10/08

1.2K0

Kafka是如何保证高性能和高吞吐量的？

kafka 缓存数据库大数据 sql

最早设计的目的是作为LinkedIn的活动流和运营数据的处理管道。这些数据主要是用来对用户做用户画像分析以及服务器性能数据的一些监控。

IT大咖说

2019/11/14

2.9K0

搭建高吞吐量 Kafka 分布式发布订阅消息集群

分布式

搭建高吞吐量 Kafka 分布式发布订阅消息集群简介 Kafka 是一种高吞吐的分布式发布订阅消息系统，能够替代传统的消息队列用于解耦合数据处理，缓存未处理消息等，同时具有更高的吞吐率，支持分区、多副本、冗余，因此被广泛用于大规模消息数据处理应用。Kafka 支持Java 及多种其它语言客户端，可与Hadoop、Storm、Spark等其它大数据工具结合使用。环境 Zookeeper集群: 192.168.252.121:2181,192.168.252.122:2181,192.168.252.12

程序员鹏磊

2018/02/09

8290

为什么说Kafka使用磁盘比内存快

其他

学习过[跟我学Kafka源码之LogManager分析]的同学一定会问为什么Kafka大量使用了磁盘作为传统意义的缓存。

小程故事多

2018/08/22

8140

为什么说++i的效率比i++高？

汇编语言 ide

这两个表达式从我们初学编程语言的时候就会接触到。前者是自增后取值，后者是取值后自增。我们看一个简单的例子。

编程珠玑

2019/09/16

1.2K0

为什么说 ++i 的效率比 i++ 高？

汇编语言 ide

这两个表达式从我们初学编程语言的时候就会接触到。前者是自增后取值，后者是取值后自增。

编程范源代码公司

2019/09/24

6650

为什么说++i的效率比i++高？

汇编语言 ide

这两个表达式从我们初学编程语言的时候就会接触到。前者是自增后取值，后者是取值后自增。我们看一个简单的例子。

帅地

2019/09/23

6570

kafka分区数和吞吐量的关系

kafka

要讲 kafka 分区数和吞吐量的关系，首先得理解什么是分区(partition)。

一条老狗

2019/12/27

4.1K0

Kafka：高吞吐量、消息精确一次语义以及保证消息顺序

kafka 缓存

Kafka 最初由 Linkedin 公司开发，是一个分布式、支持分区的、多副本的，基于 Zookeeper 协调的分布式消息系统，其最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于 Hadoop 的批处理系统、低延迟的实时系统、Storm/Spark 流式处理引擎、Web/Nginx 日志、访问日志，消息服务等等，用 Scala 和 Java 语言编写，Linkedin 于 2010 年将其贡献给了 Apache 基金会并成为顶级开源项目。

CG国斌

2021/12/07

1.3K0

Kafka：高吞吐量、消息精确一次语义以及保证消息顺序

kafka 缓存

CG国斌

2020/06/16

3.3K0

Redis：为什么说Redis单线程效率高

云数据库 Redis®编程算法 linux 数据库 sql

Redis采用的是基于内存的采用的是单进程单线程模型的 KV 数据库，由C语言编写，官方提供的数据是可以达到100000+的QPS（每秒内查询次数）。这个数据不比采用单进程多线程的同样基于内存的 KV 数据库 Memcached 差！

新码农

2021/01/03

9250

知乎高赞：iOS 为什么感觉比 Android 流畅？

ios android 微信百度后台

点击上方蓝色“程序猿DD”，选择“设为星标” 回复“资源”获取独家整理的学习资料！来源：zhihu.com/question/22343513/answer/840821567 这几天逛知乎，看

程序猿DD

2023/04/04

6070

MySQL DBA技术难度低为什么工资比Oracle高？

oracle 云数据库 SQL Server

编辑手记：前几天在知乎上出现了一个很热的帖子，话题是“MySQL DBA技术难度低为什么工资比oracle高？”，这个话题很快引起了热烈的讨论。从回帖的情况来看，大部分人几乎都默认了MySQL DBA工资的确高这个事实，那么原因是什么，我们节选MySQL专家刘伟的回帖跟大家分享。以下是他回帖的原文：主要有以下两个原因： 1、市场供需关系 2、技术要求相对高这两个因素一直没有得到改善，导致现在市场的行情是：招MySQL DBA难，招称心的MySQL DBA就更难。先说一个工资议价的常识，工资水平行业

数据和云

2018/03/07

2.1K0

直播分享：面对流量洪峰，Kafka如何保证数据安全和系统高吞吐量？

云直播

本文转自公众号：腾讯云中间件（ID）导语：受疫情影响，在线教育和医疗遇到了流量洪峰，如何应对以保证数据的安全和系统的稳定呢？本次直播将由腾讯云中间件CKafka消息队列核心研发-许文强为大家带来技术分享，一起来看下有哪些技术干货吧~ 活动详情互动有礼参与线上直播互动，有机会赢取萌萌的鼠年公仔哦~快来报名预约吧！技术交流添加中间件小Q妹微信，可进群与讲师面对面进行技术交流，快快行动吧~ 戳原文即可预约报名，小伙伴们约起来啊！点亮在看，你最好看

腾讯技术工程官方号

2020/02/28

6870

vue为什么v-for的优先级比v-if的高？

打包 vue.js linux

有时候有些面试中经常会问到v-for与v-if谁的优先级高，这里就通过分析源码去解答一下这个问题。

bb_xiaxia1998

2022/10/04

1840

vue为什么v-for的优先级比v-if的高？

打包 vue.js linux

有时候有些面试中经常会问到v-for与v-if谁的优先级高，这里就通过分析源码去解答一下这个问题。

bb_xiaxia1998

2022/10/19

2840

redis淘汰+过期双向保证高可用 | redis 为什么那么快？

云数据库 Redis®存储 java

本文凌驾于redis基础之上，这里笔者默认大家都已经安装了redis . 并实际使用过redis

Java_老男孩

2021/07/01

7030

为什么产品经理的工资不能够比程序员高？

facebook it 产品经理程序员原型

在我们 IT 界，程序员和产品经理简直就是一对冤家。在工作上天天互怼，互相不服气。其实导致这种现象出现的原因就是：产品经理把程序员当民工，程序员把产品经理当 SB，其实是互相不了解罢了。今天，我们不聊程序员与产品经理工作上的爱恨情仇，因为我之前写过类似的文章了。今天我想聊得话题就是：为什么产品经理的工资不能够比程序员高？想写这个话题的原因是前一段时间有个读者留言，抱怨说：最近想离职了，感觉不受重视，公司新来的产品经理工资比我高，心里超级不爽。不知道大家遇到这种情况，有没有想到过离职这种年头？反正我认为

非著名程序员

2018/02/09

2.5K0

相似问题

Redis是如何实现高吞吐量和高性能的？

Kafka Streams重新平衡高吞吐量kafka-streams服务的延迟峰值

为什么kafka生产者(perf测试)有如此低的吞吐量/高延迟？

具有高吞吐量的春季集成的Redis队列正在丢失消息。

为什么我的dynamodb吞吐量这么高？

添加站长进交流群

领取专属 10元无门槛券

AI混元助手 在线答疑

关注 腾讯云开发者公众号

洞察 腾讯核心技术

剖析业界实践案例

问为什么Kafka的吞吐量比Redis高？
EN