首页
学习
活动
专区
工具
TVP
发布

#kafka

Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。该项目的目标是为处理实时数据提供一个统一、高吞吐、低延迟的平台。

Kafka 集群部署

Freedom123

Kafka 集群部署之前需要部署Zookeeper集群,关于Zookeeper集群的部署前面已经介绍过并且写了博客,需要了解的出门左拐就能看到 上篇文件介...

600

Kafka 单机部署

Freedom123

Kafka 单机部署区分集成Zookeeper 部署和Zookeeper + Kafka 部署俩总方式,如果是单机部署Kafka,集成Zookeeper 最简单...

200

Kafka 整体介绍

Freedom123

简述:     Kafka是一个消息中间件,一个分布式的流平台,    是Spark生态中重要的组件,支持分布式,高可用,高吞吐,多副本     是一个分布...

700

kafka基本操作(二) linux环境下多个broker

六月的雨在Tencent

2400

kafka基本操作(一) linux环境下一个broker

六月的雨在Tencent

1.下载: 在kafka官网 http://kafka.apache.org/downloads下载到最新的kafka安装包

1500

解析Kafka: 复杂性所带来的价值

云云众生s

Kafka在大规模内部托管和管理方面确实很困难,但它提供的实际好处和功能超过了运营方面的挑战。

2410

极大提高可扩展性 – Apache Kafka 和 OpenTelemetry

云云众生s

译自 SigNoz 博客 Maximizing Scalability - Apache Kafka and OpenTelemetry 。

1900

【2月新功能速递】日志支持 Kafka 协议匿名上传 & 投递支持不同 COS 存储类型

日志服务CLS小助手

无需登录或使用密钥,简化上传流程;用户能自由选择上传日志的时间、地点和方式,不受登录或密钥限制,灵活度更高;保护敏感信息不泄露,降低数据风险。

7810

如何在 DDD 中优雅的发送 Kafka 消息?

小傅哥

下载 SwitchHost 配置一个映射地址。点击 + 添加一个本地环境,之后配置你的 IP kafka 这样就能找这个地址了。IP 为你本地的IP,如果是云服...

4610

【Kafka系列】Kafka事务一般在什么场景下使用呢

爱思考的小陈

它是这样的,发送消息时同时发送生产者id、消息序列号,kafka会根据这些信息避免重复消息被写入。

11220

基于 HBase & Phoenix 构建实时数仓(5)—— 用 Kafka Connect 做实时数据同步

用户1148526

本篇演示安装配置 Kafka connect 插件实现 MySQL 到 Hbase 的实时数据同步。依赖环境见本专栏前面文章。相关软件版本如下:

7110

面试官:你说说Kafka是怎么保证消息可靠性的

爱思考的小陈

Kafka集群的每一个分区的首领副本,都会有n(复制系数)个broker机器去复制后,生成跟随者副本。

8220

Kafka Consumer 消费消息和 Rebalance 机制

码哥字节

Kafka 有消费组的概念,每个消费者只能消费所分配到的分区的消息,每一个分区只能被一个消费组中的一个消费者所消费,所以同一个消费组中消费者的数量如果超过了分区...

7510

Kafka Producer 发送消息至 Broker 原理和高性能必备参数设置

码哥字节

Producer 发送消息的过程如下图所示,需要经过拦截器,序列化器和分区器,最终由累加器批量发送至 Broker。

11710

kafka 三高架构设计剖析

码哥字节

Producer、Consumer、Consumer Group、Topic、Partition

4510

RocketMQ与Kafka深度对比:特性与适用场景解析

码到三十五

数据可靠性是消息中间件的核心指标之一。RocketMQ和Kafka在这方面采取了不同的策略。

24410

RocketMQ与Kafka架构深度对比

码到三十五

通过对RocketMQ与Kafka在架构设计、组件构成、数据流向、扩展性、容错性和一致性等方面的深入对比分析,我们可以发现这两款消息中间件各有千秋。Rocket...

7210

kafka常见报错集合-四

沐榕樰

3、连接kafka报错framework, code:141, msg:kafka client transport GetProducer:kafka: cl...

13510

【Kafka面试演练】那Kafka消费者手动提交、自动提交有什么区别?

爱思考的小陈

是这样的,Kafka的异步提交消息相比同步提交,不需要在brocker响应前阻塞线程。

6810

java kafka客户端何时设置的kafka消费者默认值

johnhuster的分享

kafka为什么有些属性没有配置却能正常工作,那是因为kafka-clients对有些消费者设置了默认值,具体看下ConsumerConfig类的静态模块,具体...

9810
领券