如果我的问题到处都是,很抱歉,但我是Apache Kafka的新手,目前我正在尝试使用Windows操作系统将Teradata表(在VM上)中的数据导入到Kafka中。到目前为止,我已经完成了以下工作:
1-下载Apache Kafka 2-运行Kafka服务器和Zookeper。3-使用IntelliJ集成开发环境用Java语言编写一个生产者类。4-通过Kafka的kafka-console-consumer.bat
脚本使用生产者的输出,该脚本随Apache Kafka下载的压缩包一起提供。
我读了一些帖子,发现要连接Kafka和Teradata,我需要使用Kafka connect。但有几件事让我感到困惑:
1-我遇到的大多数帖子都使用Confluent。我读到confluent仅适用于Linux操作系统。有没有办法在不使用Confluent的情况下完成向Kafka注入数据的任务?
2-我还知道我必须将kafka-connect-jdbc jars复制到Kafka libs文件夹。然后,我必须将Teradata JDBC jar复制到Kafka lib文件夹中。
将Teradata或任何其他数据库与Kafka集成的下一步是什么?如何在intelliJ中创建配置文件,并链接到Kafka?
发布于 2020-10-28 23:10:53
Linux仅适用于
操作系统。
Confluent CLI,是的。合流平台,不。
在不使用Confluent的情况下将数据注入Kafka?
好的。Kafka Connect与Apache Kafka打包在一起,后者是Confluent分发的。再说一次,不受操作系统限制
将Teradata或任何其他数据库与Kafka集成的下一步是什么?
使用Windows脚本运行Kafka Connect。属性文件保持不变
http://kafka.apache.org/documentation.html#connect_user
请注意,JDBC连接器仅适用于某些数据库方言,而Teradata可能无法按预期工作
https://stackoverflow.com/questions/64570179
复制相似问题