首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

#kafka

Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。该项目的目标是为处理实时数据提供一个统一、高吞吐、低延迟的平台。

【大数据技术基础 | 实验十四】Kafka实验:订阅推送示例

Francek Chen

在两台机器上(以slave1,slave2为例),分别部署一个broker,Zookeeper使用的是单独的集群,然后创建一个topic,启动模拟的生产者和消费...

4200

【数据采集与预处理】数据接入工具Kafka

Francek Chen

7、Offset:kafka 的存储文件都是按照 offset.kafka 来命名,用 offset 做名字的好处是方便查找。例如你想找位于 2049 的位置,...

3000

Kafka的发布-订阅功能: Java实现与应用场景解析

GeekLiHua

腾讯 | 业务安全工程师 (已认证)

Apache Kafka 是一个流行的分布式消息传递系统,广泛用于构建实时数据管道和流应用程序。它以高吞吐量、内置的分区、副本和容错性著称。Kafka 主要提供...

9610

ZooKeeper 在 Kafka 中的应用

GeekLiHua

腾讯 | 业务安全工程师 (已认证)

Apache ZooKeeper 在 Apache Kafka 的架构中扮演着至关重要的角色。作为一个分布式协调服务,ZooKeeper 提供一致性和同步,确保...

10410

Kafka的Topic CRUD演示

GeekLiHua

腾讯 | 业务安全工程师 (已认证)

Kafka是一个分布式流处理平台,它以高吞吐量、可扩展性和容错性而闻名。在Kafka中,Topic是消息流的逻辑容器,用于组织和存储消息。让我们通过Java代码...

6510

Kafka:新闻发布站的比喻

GeekLiHua

腾讯 | 业务安全工程师 (已认证)

Kafka就像一个忙碌的新闻发布站,它能够处理和分发大量的实时信息。通过新闻发布站的比喻来详细解释Kafka中的各个知识点、设计思想,结合具体的代码和面试常问的...

3900

使用Kafka实现Java异步更新通知解决Redis与MySQL数据不一致

GeekLiHua

腾讯 | 业务安全工程师 (已认证)

在高并发的应用场景中,秒杀系统等业务可能导致Redis与MySQL中的数据不一致。通过异步更新通知,我们可以及时发现不一致并采取相应措施,确保系统的稳定性和一致...

3500

掌握Kafka的topics:使用kafka-topics.sh的综合指南

Lion Long

/bin目录下的每一个脚本工具,都有着众多的参数选项,不可能所有命令都记得住,这些脚本都可以使用 --help 参数来打印列出其所需的参数信息。

12800

一步步教你搭建Kafka开发环境,轻松上手!

Lion Long

(1)登录官网下载地址https://www.oracle.com/java/technologies/downloads/#java8,找到对应压缩包。

13800

Kafka高性能背后的秘密

写bug的高哈哈

Kafka 以其卓越的伸缩性和容错能力,确立了在分布式系统中的核心地位,成为消息队列领域的佼佼者。接下来,我将带领大家深入了解 Kafka 的高性能原理。在本节...

7110

CentOS7 部署kafaka集群

郑郑SunUp

9010

Go 语言微服务框架 Kratos 集成第三方库 kafka-go 操作消息队列 Kafka

frank.

Go 语言微服务框架 Kratos 不限制使用任何第三方库,Go 语言操作消息队列 Kafka 有很多优秀的第三方库,比如 sarama 和 kafka-go,...

5000

CentOS7 安装Kafka-单机

郑郑SunUp

配置主机名与IP地址映射后,访问服务器上部署的服务就不用在记住IP地址,只需要输入服务器名称即可访问服务,相比记住IP地址访问应用要方便。

6910

左移与Kafka相遇:测试事件驱动型微服务

云云众生s

通过沙箱,开发者可以查看其更改的影响,而不会干扰其他开发者的测试或系统的常规流量。

7310

Kafka主题分区时不要丢失消息

云云众生s

关于负载均衡策略的快速介绍。使用 Golang IBM/sarama 在 Kafka 主题上消费新添加的分区中的事件。

10610

安全地使用 Docker 和 Systemctl 部署 Kafka 的综合指南

对你无可奈何

当前环境使用docker docker-compose 部署raft模式的kafka三节点集群,某一个节点的docker-compose.yaml配置文件如下...

22130

分布式系统Kafka和ES中,JVM内存越大越好吗?

用户9184480

这篇文章,给大家聊一个生产环境的实践经验:线上系统部署的时候,JVM 堆内存大小是越大越好吗?

5110

3台廉价机器每秒写入2百万!Kafka为什么那么快?

用户9184480

Kafka 的消息是保存或缓存在磁盘上的,一般认为在磁盘上读写数据是会降低性能的,因为寻址会比较消耗时间,但是实际上,Kafka 的特性之一就是高吞吐率。

8610

kafka第二次课!!!

用户9184480

1,课程回顾 2,本章重点 kafka的整体工作流程 消息生产者写入消息过程 消息消费者消费要点 kafka的Java api

8410

kafka第三次课!

用户9184480

1,课程回顾 2,本章重点 springboot整合kafka springcloud整合kafka 3,具体内容 3.1 springboot整合k...

9610

相关产品

  • Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。该项目的目标是为处理实时数据提供一个统一、高吞吐、低延迟的平台。

领券