首页
学习
活动
专区
圈层
工具
发布
社区首页 >专栏 >SparkStreaming 之 Direct 模式深度剖析

SparkStreaming 之 Direct 模式深度剖析

作者头像
starzy
修改于 2026-11-16 20:10:40
修改于 2026-11-16 20:10:40
100
举报
概述
摘要:前面讲接收数据时提过,Receiver 模式是 Spark Streaming 早期的 Kafka 集成方式,Direct 模式是它的替代者。这篇把 Direct 模式讲透:它为什么没有 Receiver、offset 怎么自己管理、怎么靠"offset 和 Job 结果绑定"拿到 exactly-once,以及 createDirectStream 的 LocationStrategies
文章被收录于专栏:Spark 技术Spark 技术

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档