将您的事件直接从kafka存储到数据库？，何时或为什么以前使用S3/HDFS？
将您的事件直接从kafka存储到数据库？，何时或为什么以前使用S3/HDFS？
提问于 2020-09-25 14:46:15
我正在学习事件流/事件管道。
我知道一个普通的(简单的)管道，比如说这样的管道，在互联网上很容易找到：
Kafka-> S3/HDFS/... -> database/datawarehouse我的问题是下一个问题，为什么我看不到这个建筑？
Kafka -> database/datawarehouse我知道为什么在我的公司，我们使用S3存储我们的事件在数据库之前，但我只是想要一些额外的意见或观点，因为我没有那么多的工作，在公司的事件流管道谢谢！
回答 2
Stack Overflow用户
回答已采纳
发布于 2020-09-25 14:55:28
这是我创建的架构图之一：
注：这里，我把数据从卡夫卡推到MongoDB，Hive和HBase
Stack Overflow用户
发布于 2020-09-26 04:14:45
Kafka有连接器，如果您只想将数据从Kafka流到其他存储库(接收器连接器)或相反的存储库(源连接器)，则应该利用这些连接器。
看看这里的文件。
https://docs.confluent.io/current/connect/managing/connectors.html
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/64066412
复制相关文章
相似问题
腾讯云开发者
