腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(226)
视频
沙龙
1
回答
使用
spring
云
流
kafka
发送
的
kafka-
avro
-
console-consumer
消费
avro
消息
时
出错
、
、
、
我尝试了官方
的
示例(
消费
者/生产者)与我本地安装
的
confluent 4.0.0,它可以在
发送
post请求和在侦听器中接收
时
发送
“传感器”
avro
消息
,但当我
使用
confluent 4.0.0附带
的
kafka
-
avro
-
console-consumer
工具查看
发送
的
avro
消息
<
浏览 3
提问于2018-08-26
得票数 1
1
回答
使用
kafka
-
avro
-console-consumer
的
未知魔术字节
、
、
、
我一直在尝试与
kafka
-
avro
-console-consumer从Confluent连接到我们
的
遗留
Kafka
集群,该集群是在没有Confluent Schema Registry
的
情况下部署
的
。我
使用
如下属性显式地提供了模式: --topic test \--property key.sch
浏览 2
提问于2018-09-19
得票数 6
回答已采纳
2
回答
如何用弹簧引导和弹簧
云
流在
kafka
生产者上设置
avro
内容类型
、
、
我试图用
avro
消息
生产者、
kafka
和
avro
消费
者构建一个
使用
spring
引导、
spring
云
流
模式注册表和
kafka
绑定器
的
工作示例。在
使用
消息
时会发生以下错误: 错误7059 --afka-侦听器-1 o.s.c.s.b.k.KafkaMessageChannelBinder :无法
使用
contentType java.
浏览 6
提问于2017-03-09
得票数 1
1
回答
使用
avro
的
Kafka
控制台生产商
、
、
我正试图
使用
apache-
kafka
二进制文件中
的
kafka-
控制台-生产者来生成
消息
,并在春季启动
时
从
消费
者设置中
消费
。
使用
者
使用
avro
架构。当以json格式生成
消息
时
,我
的
使用
者抛出异常--“无法序列化”。 我找到了一个解决方案来
使用
“7.1”,其中有
kafka
-
avro</em
浏览 6
提问于2022-04-26
得票数 0
回答已采纳
1
回答
在
Spring
中,
Kafka
模式注册是如何发生
的
?
、
、
、
、
我试图了解如何
使用
与卡夫卡绑定
的
Spring
流
。让我们从Stream示例中获取。
AVRO
架构位于src/resources/
avro
中。当运行mvn:c
浏览 0
提问于2021-09-20
得票数 1
回答已采纳
1
回答
通过
spring
kafka
发送
的
landoop/fast- data -dev中
的
kafka
消息
数据类型错误
、
、
、
我有一个
使用
Spring
-
Kafka
的
Spring
Boot应用程序,我
使用
docker中
的
landoop's fast-data-dev作为我
的
kafka
集群。我
使用
kafka
模板、
avro
和confluent
的
模式注册表生成到一些主题
的
消息
。但是,当我进入快速数据开发ui
时
,我可以看到我
的
浏览 33
提问于2019-05-06
得票数 0
4
回答
Spring
,
Spring
和
Avro
兼容性未知魔法字节
、
、
、
、
我有一个问题,反序列化来自卡夫卡主题
的
信息。这些
消息
已经
使用
spring
云
流
和Apache序列化。我正在
使用
Spring
阅读它们,并试图对它们进行反序列化。如果我同时
使用
spring
来生成和
使用
消息
,那么我可以很好地反序列化这些
消息
。问题是当我用
Spring
消费
它们,然后尝试反序列化。我在这个主题上
发送
浏览 0
提问于2019-01-30
得票数 3
回答已采纳
2
回答
无法将
Avro
特定记录反序列化为中
的
通用记录
、
、
、
、
我希望有一个
Spring
的
通用
使用
者,在这里我不需要在编译
时
指定
Avro
消息
的
模式。由于
消息
中包含模式id,所以应该可以
使用
模式id将其反序列化为对象或一般记录(这可以轻松地在框架之外完成)。为了做到这一点,我尝试
使用
与我们以前
使用
的
方法相同
的
方法,即
使用
带有特定记录
的
spring
云
流
浏览 1
提问于2019-08-21
得票数 0
回答已采纳
1
回答
春季
云
kafka
流
模式注册中心
、
、
我试图
使用
函数编程(和
spring
云
流
)从输入主题转换输入
AVRO
消息
,并在输出主题上发布新
消息
。我尝试过非
AVRO
输入
的
转换,它工作得很好。 创建名为‘kafkaStreamsFunctionProcessorInvoker’
的
bean
时
出错</
浏览 5
提问于2021-04-06
得票数 1
2
回答
在批处理模式下获取
消息
头
、
、
、
在春季
云
流
卡夫卡应用程序中,当以常规模式
使用
消息
时
,我会正确地获得带有有效负载和自定义头
的
消息
。然而,当我将
使用
者"headerMode“设置为true,将函数
的
输入类型设置为List<?> (根据文档)
时
,我会得到一个有效负载列表。如何获得包含头和有效负载
的
消息
列表?当设置集合类型
时
(例如,List<Message<MyType
浏览 20
提问于2021-12-05
得票数 0
1
回答
Spring
cloud stream
kafka
avro
反序列化
、
、
我正在编写一个
使用
Avro
消息
的
spring
云
流
接收器应用程序。我试图让应用程序
使用
这些
消息
,但是我得到了以下错误。=0,
kafka
_receivedTopic=bam_hrapi,
kafka
_receivedTimestamp=-1, contentType=
avro
/bytes}], failedMessage=0,
kafka
_received
浏览 1
提问于2018-09-19
得票数 1
1
回答
消费
者一条
使用
泉-卡夫卡生产
的
阿夫罗信息-
云
流
-卡夫卡-粘合剂
、
、
、
我正在尝试阅读卡夫卡主题中
的
最后一条
消息
,
使用
ConsumerSeekAware.Message类型是
Avro
列表。我能成功地做到这一点。但在反序列化过程中,它是失败
的
。这条
消息
是
使用
spring
云
流
-
kafka
框架生成
的
。我知道
avro
消息
可以反序列化如下所示。
消息
是
avro
对象
的
列表。但是
浏览 4
提问于2017-09-28
得票数 1
1
回答
春
云
流
卡夫卡绑定器enableDlq没有像我预期
的
那样工作。
、
、
、
我正在
使用
spring
云
流
kafka
绑定器和模式注册表。(不是kakfa
流
)我要做
的
是,当不可反序列化
消息
进入输入主题
时
,将deserializable
消息
发送
到dlq.。所以我尝试了像下面这样
的
配置,但是
spring
应用程序让不断地无限地重试,并且说 由: org.apache.
kafka
.common.errors.Serialization
浏览 3
提问于2021-02-18
得票数 0
回答已采纳
1
回答
将事件类型(
Avro
-SpecificRecordBase)从反应性编程中
的
一个主题路由到正确
的
使用
者
、
、
、
、
我
使用
弹簧
云
流
:3.2.2弹簧
云
流
绑定卡夫卡:3.2.5
spring
-cloud-stream-binder-
kafka
-streams:3.2.5 我想在反应性编程中写出
消费
者卡夫卡。我
使用
avro
模式注册表。在我
的
例子中,我在一个主题中输入了多个事件。我
的
使用
者
使用
所有类型,但我想在每个事件类型中编写一个
使用
者。在您<em
浏览 10
提问于2022-09-30
得票数 0
1
回答
Spring
Cloud Stream -如何在满足条件
的
情况下读取SpecificRecord,否则读取GenericRecord
、
、
、
、
当从
Kafka
输入主题读取具有唯一
Avro
模式
的
消息
类型A
时
,我让服务A执行操作A,当从相同主题读取
消息
类型B
时
,服务B执行操作B。 我不希望服务A知道B
的
模式,反之亦然。如果我有两个单独
的
主题,我会很容易地将
spring
.
kafka
.properties.specific.
avro
.reader设置为true并在特定记录中
消费
,但是由于我不希望模式B出现在服务A
浏览 7
提问于2020-12-07
得票数 0
回答已采纳
1
回答
如何正确创建
消费
者进行集成测试,以验证
消息
是否被推送到
kafka
?
、
、
、
、
我正在
使用
avro
生成一个java类( Heartbeat ),并且我正在
使用
Spring
云
消息
处理器,以便通过此Heartbeat类将
消息
推送到
kafka
。因此,
消息
如预期
的
那样出现了。我也从我
的
heartbeatKafkaConsumer收到一条
消息
,但是当我执行断言
时
,我得到了这个错误: <"ConsumerRecor
浏览 1
提问于2021-05-28
得票数 0
1
回答
使用
Snowflake和
Kafka
连接器
的
日志和语句
、
、
有没有可能会丢失一些
消息
,如果我们
使用
雪花
kafka
连接器。例如,如果
kafka
连接器读取
消息
并在
消息
写入variant表之前提交偏移量,那么我们将丢失该
消息
。如果我们
使用
kafka
connect,会出现这种情况吗? 如果您有任何示例,也欢迎这些示例,谢谢!
浏览 0
提问于2019-12-04
得票数 2
1
回答
在
发送
avro
消息
时
获取异常,异常是注册
Avro
模式
的
org.apache.
kafka
.common.errors.SerializationException:错误:
、
、
、
、
我正在
使用
spring
云
流
并试图发布
avro
消息
,但是得到了上述异常,
spring
.cloud.stream.bindings.feed-output-channel.producer.useNativeEncoding
spring
.cloud.stream.
kafka
.binder.producer-properties.value.serializer=io.confluent.
kafka
.s
浏览 14
提问于2022-01-21
得票数 0
回答已采纳
1
回答
带有解码器问题
的
Kafka
Avro
消费
者
、
、
、
、
当我尝试
使用
我各自
的
模式对数据运行时,它返回错误"AvroRuntimeException:格式错误
的
数据。长度为负:-40“。我看到其他人也遇到过类似的问题:、和。它一直运行到这部分代码(第73行)我已经尝试了其他解码器,并打印出了
avro
变量
的
内容,我相信你会期望序列化
的
byteArrayInputStream数据看起来是什么样子(
浏览 0
提问于2016-03-16
得票数 11
回答已采纳
2
回答
消息
的
键和值
的
不同模式类型
、
、
我想知道是否允许它生成具有JSON键模式和
AVRO
值模式
的
消息
。 对生产者记录
的
混合和匹配模式类型有限制吗? 模式注册中心会禁止它吗?这被认为是一种糟糕
的
做法吗?
浏览 22
提问于2020-08-20
得票数 0
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券