首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

#kafka

Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。该项目的目标是为处理实时数据提供一个统一、高吞吐、低延迟的平台。

一个故事理解消息队列-上

老_张

前段时间,知识星球里一位同学给我分享了他对消息队列的理解,并且用一个故事形象的表述了消息队列的作用。看完他的表述,我觉得用故事来描述技术组件作用的方式很有意思,...

4810

图解Kafka:架构设计、消息可靠、数据持久、高性能背后的底层原理

腾讯云开发者

针对问题2,kafka 提供两类消息发送方式:同步(sync)发送和异步(async)发送,trpc-go 框架中kafka插件相关参数如下:

68750

为什么我们在规模化实时数据中使用Apache Kafka

云云众生s

了解网络安全供应商 SecurityScorecard 如何利用数据流来增强其业务能力。

9310

AutoMQ vs Kafka: 来自小红书的独立深度评测与对比

用户10807116

当前小红书消息引擎团队与 AutoMQ 团队正在深度合作,共同推动社区建设,探索云原生消息引擎的前沿技术。本文基于 OpenMessaging 框架,对 Aut...

10510

9 张图带你理解 Kafka 中高水位 HW

jinjunzhu

Kafka 高水位(简称 HW)是 Kafka 中非常重要的一个概念,今天来聊一聊 HW。

12310

ckafka这个消费者参数配置后, 为什么Kafka rebalance时间好长, 超过一个小时 还没有完成

沐榕樰

ckafka这个消费者参数配置后, 为什么Kafka rebalance时间好长, 超过一个小时 还没有完成

6110

Kafka 高性能之 Page Cache 的应用哲学

码哥字节

Kafka 的消息存储会按照该 Topic 的 Partition 进行保存,即每个 Partition 都有属于自己的日志,在 Kafka 中被称为分区日志(...

8310

全网把Kafka概念讲的最透彻的文章,别无二家

Java进阶指南针

消息队列老大哥Kafka在官网的介绍是这么说的,真是霸气:全球财富前100强公司有超过80%信任并使用Kafka。Kafka目前在GitHub目前也已经有sta...

22140

干货!一文掌握通过网络抓包排查Kafka集群性能问题的实践总结

用户9421738

众所周知,Kafka是一个开源分布式事件流平台,尤其以高吞吐、低延迟著称,并且已经被数千家企业用于高性能数据管道、流分析、数据集成和核心业务应用程序。

12310

重磅好文!现场故障回顾:最新版Kafka数据过期未删除问题的源码深入剖析与终极解决方案总结

用户9421738

周五晚上电话轰炸,驻场人员反映某公安厅数据上报业务故障。究其原因是数据域Kafka集群不可用。经过排查发现虽然Kafka集群设置了3天数据过期时间(且Topic...

8210

一次性完整剖析Kafka数据端到端延迟的详解总结

用户9421738

至此,kafka数据的端到端延迟的详细内容阐述完成。对于低延迟需求的kafka数据传输的调优提供思路!

4410

重磅利器:kafka-conect基于exactly-once语义实时同步Kafka到Clickhouse

用户9421738

本文详细讲述clickhouse-kafka-connect项目“有且仅有一次”语义的实现方案和案例实践总结。该项目基于Kafka connect框架和Clic...

11010

在Kafka中确保消息顺序:策略和配置

Kahen

在这篇文章中,我们将探讨Apache Kafka中关于消息顺序的挑战和解决方案。在分布式系统中,按正确顺序处理消息对于维护数据的完整性和一致性至关重要。虽然Ka...

10810

【十九】初学Kafka并实战整合SpringCloudStream进行使用

小z666

注意:zookeeper默认占用端口号:2181,kafka占用9092,注意跑之前看看端口是否被占用,否则出现端口冲突问题。

8210

Kafka文件存储机制 - Java技术债务

Java技术债务

Kafka是一种分布式的流处理平台,它通过文件存储机制来保证数据的可靠性,高效性和可扩展性。

7510

kafka 可视化 web 工具 kafdrop

BUG弄潮儿

第一次运行docker-compose会先下载obsidiandynamics/kafka和obsidiandynamics/kafdrop镜像,随后启动容器。

24710

「布道师系列文章」宝兰德徐清康解析 Kafka 和 AutoMQ 的监控

用户10807116

当我们使用一个软件的时候,经常都会问这个软件怎么监控、监控他的哪些指标?Kafka 的监控挺长时间都是一个老大难的问题,社区在监控方面一直没有投入太大的精力。如...

500

How to run kafka in OAUTHBEARER test mode.

rabbit_lei

This is just a test setting of OAUTHBEARER for kafka.

5810

一条指令,解决外网无法访问云服务器Kafka容器问题

叫我阿柒啊

只能另寻他法,之前不是刚在宿主机上安装了一个kafka客户端吗,我们可以修改客户端里面的配置文件,然后放到配置文件目录下,替换不就ok了吗。如果没有客户端,将k...

25320

一条指令,解决外网无法访问云服务器Kafka容器问题

叫我阿柒啊

只能另寻他法,之前不是刚在宿主机上安装了一个kafka客户端吗,我们可以修改客户端里面的配置文件,然后放到配置文件目录下,替换不就ok了吗。如果没有客户端,将k...

25320
领券