腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
使用
Kafka
Connect构建数据转换服务
、
卡夫卡
流
是好的,但我必须做每一个配置非常手动。相反,
Kafka
提供了它的API接口,它对于处理配置以及任务、工作人员等都非常有用。 <em
浏览 11
提问于2021-04-26
得票数 0
1
回答
在中设置表/
主题
顺序
、
、
有两个
主题
,source_topic.a,source_topic.b。source_topic.a与source_topic.b有依赖关系(例如。首先需要沉掉source_topic.b )。是否有任何方法在源/接收器配置中设置
主题
/表的顺序? 下面是
使用
的配置,有多个表和
主题
。时间戳用于每次轮询表时更新表的模式。timestamp.initial将值设置为特定的时间戳。
浏览 2
提问于2020-11-26
得票数 1
回答已采纳
2
回答
如何
在卡夫卡
流
中获得当前的卡夫卡
主题
?
、
我的场景是我
使用
了很多相同前缀的卡夫卡
主题
。house.door,house.room ),并
使用
Kafka
流
regex
主题
模式API来
使用
所有
主题
。一切看起来都很好,我得到了数据的密钥和信息。为了处理数据,我需要
主题
名,所以我可以基于
主题
名进行
连接
,但是我不知道
如何
在
Kafka
流
DSL中获取
主题
名。 解决我的问题的一个可能的方
浏览 0
提问于2018-01-19
得票数 4
回答已采纳
1
回答
Spring
Kafka
JDBC
连接
器兼容性
、
、
、
Kafka
JDBC connect兼容Spring-
Kafka
库吗? 我确实关注了,但仍然有一些困惑。
浏览 4
提问于2020-07-04
得票数 0
1
回答
Kafka
stream应用程序可以从Kinesis Stream中读取吗?
、
、
、
我需要写一个java应用程序,从Kinesis
流
读取和存储数据到
Kafka
主题
。我不能
使用
连接
器,我必须
使用
Kafka
Streams,因为其中涉及到很多逻辑。
Kafka
Stream是否可以直接从Kinesis
流
读取,或者我必须先将数据存储到
Kafka
topic才能被
Kafka
Stream读取?我读了很多关于
Kafka
Streams的文章,除了
Kafka
<
浏览 18
提问于2019-07-29
得票数 1
1
回答
Rest数据摄取到数据湖
、
、
满载、CDC和
流
数据。将数据加载到
kafka
主题
中,不重复
浏览 0
提问于2018-01-30
得票数 1
1
回答
卡夫卡
流
应用程序在没有读取消息一段时间后停止工作。
、
我注意到,当我的
Kafka
流
应用程序有一段时间没有阅读来自
Kafka
主题
的新消息时,它就停止工作了。这是我第三次看到这种情况发生。 自5天以来,没有向该
主题
发出任何信息。我的
Kafka
应用程序,也是一个星星之火的java java服务器,仍然有响应能力。然而,我对卡夫卡
主题
产生的信息不再被卡夫卡
流
所阅读。当我重新启动应用程序时,所有消息都将从代理中获取。我
如何
使我的卡夫卡
流
应用程序更持久的这种情况?它认为卡夫卡<em
浏览 0
提问于2018-04-05
得票数 0
2
回答
卡夫卡
连接
和卡夫卡
流
提交间隔之间有关系吗?
、
、
假设我们有一个
Kafka
Sink
连接
器从
主题
TopicA中填充一个数据库,由Sink
连接
器更新到数据库中的数据,以及执行更新的 受
Kafka
流
应用程序提交间隔的影响,如果是,
如何
影响?
浏览 4
提问于2020-04-25
得票数 0
回答已采纳
1
回答
用
Kafka
代替File拍和Logstash
、
、
、
、
我是麋鹿堆栈的新手,我只是想知道是否可以
使用
Kafka
将日志文件发送到Elasticsearch。,但我也需要用 grok 这样的过滤器来解析日志。是可能的吗?谢谢您:) 注意:我试图做的是Ship +分析在
Kafka
中的日志。我知道
使用
elasticsearch
连接
器可以将日志发送到Elasticsearch,但我想问的是,
使用
Kafka
是否可以解析数据(Logstash的工作)。
浏览 0
提问于2018-07-18
得票数 3
回答已采纳
1
回答
kafka
连接
elasticsearch
连接
器(接收器)数据移动(几乎)实时
、
有兴趣将数据从
kafka
转移到elasticsearch。所以我设置了。尽管我查看了所有文档和,但我仍然找到了
如何
配置
连接
器,以便将数据从
kafka
移动到elasticsearch (接近于实时)。也就是说,让
连接
器每秒
使用
来自(
kafka
)
主题
的消息,并将它们写入elasticsearch,模拟从
kafka
流到elasticsearch的消息
流
。这是
连接
器的当前配置: "na
浏览 1
提问于2020-02-18
得票数 0
2
回答
基于并行度管理的
Kafka
流
容错
、
、
、
、
Description:在
使用
了卡夫卡
主题
的事件之后,我有一些线程并行地写到s3。由于一些业务应用逻辑和处理,没有
使用
kafka
-
连接
器-S3。我希望应用程序是容错的,不想丢失消息。
主题
的消息。在崩溃场景中,我应该
如何
处
浏览 4
提问于2020-11-23
得票数 0
1
回答
Kafka
用例替换控制M作业
、
、
、
、
目前,我们
使用
apache骆驼来完成这个任务。创建csv
kafka
源
连接
器来读取csv中的数据,并插入
kafka
输入
主题
创建春云
kafka
流
绑定应用程序,从输入
主题
读取数据,丰富数据并将数据推送到输出
主题
,让
kafka
接收器
连接
器将数据从输出
主题
推送到数据库现在问题二,我们需要有数据库
连接</em
浏览 1
提问于2021-05-14
得票数 0
1
回答
如何
使用
kafka
连接
来
使用
avro数据?
、
、
、
我已经创建了一个
连接
器来处理Avro数据。我能够将数据发布到一个
主题
中。但我不会将数据输入到输出
主题
中。我已经检查了
连接
器和rest代理的日志,没有显示错误。connector.class": "io.confluent.connect.http.HttpSinkConnector", "headers": "Content-Type:application/vnd.
kafka
.json.v2+json|Accept:a
浏览 7
提问于2022-04-01
得票数 0
1
回答
如何
在Mule和
kafka
连接
器消费者和生产者属性文件中设置加密密码
、
我有Mule应用程序,并
使用
Apache
Kafka
连接
器
连接
主题
。mule-kakfa
连接
器jar是"mule-module-
kafka
-2.1.0.jar“
连接
器
使用
producer.properties和consumer.properties文件,这些文件包含纯文本形式的你能建议
如何
加密这些密码和
使用
在mule流程中。Mule
Kafka
连接
器代码
浏览 42
提问于2019-06-11
得票数 0
1
回答
一个
连接
器的多个转换器
、
卡夫卡
连接
器中有可能为单个接收器
连接
器提供多个转换器吗?例如,我们有一个用例,在该用例中,我们以格式A接收来自
主题
的数据,但希望将其流到两个位置,一个是格式A,另一个是格式B。在一个
连接
器中可以做到这一点吗?
浏览 1
提问于2017-10-12
得票数 0
回答已采纳
1
回答
使用
kafka
连接
的CSV数据
流
、
、
我们有一个CSV文件格式的业务事件,需要
使用
Kafka
附加到数据库(在我们的例子中是雪花)。我们是否需要将csv文件转换为JSON格式(
使用
python),然后将值传递给
kafka
-producer
主题
?
浏览 5
提问于2020-05-25
得票数 0
回答已采纳
1
回答
从中间
主题
加入KStream和KTable会导致异常
、
如果没有联接,我从中间
主题
"book-attribute-by-id“中阅读就没有问题。用于KStream的示例msg: value: {id: 1, book_id: 1, attribute_id: 1, value: 200}} }); 线程"xxx-StreamThread-1“org.apache.
ka
浏览 1
提问于2019-02-06
得票数 0
回答已采纳
1
回答
Kafka
流
-存储在内存中的内容和
流
应用程序中的磁盘
、
我是卡夫卡
流
的新手,我一直在阅读关于
如何
设置卡夫卡
流
应用程序的。 不过,我不清楚数据是
如何
处理的--什么存储在内存中,什么存储在磁盘上。我有2个
Kafka
主题
,两个键值存储类型,为每个键保留最古老的值。在我的streams应用程序中,我想将这两个
主题
连接
起来,并将
连接
输出回
kafka
,稍后可以被一些接收器
使用
。我担心的是,不清楚
连接
是
如何
执行的。这两个
主题
浏览 3
提问于2017-08-23
得票数 7
回答已采纳
2
回答
Apache Beam over Apache
Kafka
流
处理
、
、
、
Apache Beam和Apache
Kafka
在
流
处理方面有什么不同?我也在努力掌握技术和编程上的差异。 请通过您的经验报告来帮助我理解。
浏览 1
提问于2018-06-15
得票数 10
1
回答
Kafka
AMQ
流
-
主题
命令
、
、
我从未
使用
过AMQ Streams (
Kafka
)。
如何
通过路由(读取/创建/删除)
连接
到
主题
?对于
Kafka
,例如在我的本地机器上,我
使用
带有基本命令的CLI。但是对于AMQ
流
,我只有路由。
浏览 4
提问于2020-06-01
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
使用Spark Streaming处理Kafka数据流
系统解读Kafka的流和表(二):主题、分区和存储
通过Pipelinedb使用SQL查询Kafka实时流数据
Flink 如何进行流与流之间的连接和联合?
加密SSH连接安全吗?如何使用?
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券