腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
使用
Apache
Kafka
代替
SQS
、
、
、
我有一个应用程序,它
使用
AWS
SQS
和Lambda来处理推入队列的消息。Lambda会继续轮询队列,当出现新消息时,它会处理该消息。 在这种情况下,是否可以在AWS上
使用
Kafka
替换
SQS
。换句话说,我们可以
使用
Kafka
作为这个用例的队列吗?
浏览 20
提问于2020-07-16
得票数 0
1
回答
卡夫卡与Netflix导体的结合
、
、
、
我想知道卡夫卡和Netflix导体(而不是
SQS
)是否有一种简单的连接方式?目前,它似乎只适用于Amazon。此外,似乎只能按任务采取一项行动。是否有一种方法可以按任务执行多个操作? 提前谢谢你,
浏览 2
提问于2017-06-12
得票数 4
1
回答
如何
使用
AWS Lambda和MSK (
Kafka
)事件流施加背压
、
、
在处理
SQS
事件流时,如果Lambda函数没有足够的保留并发,则该函数将被限制,并且可以通过
SQS
重新驱动策略重试未处理的事件/消息。
浏览 13
提问于2021-01-10
得票数 1
1
回答
如何将与消息关联的对象传递到出站通道适配器
. -> foo -> [outbound channel adapter] -> bar 我如何编写我的spring集成应用程序,以便foo可以
使用
一个额外的对象,该对象不是[outbound channel我的应用程序基本上是从AWS
SQS
接收消息(
使用
spring-integration-aws),执行一些过滤/转换,然后将消息发布到
Apache
Kafka
(
使用
spring-integration-
kafka
),并且当且仅当此操作
浏览 54
提问于2018-12-15
得票数 1
回答已采纳
1
回答
Kafka
消费者诉
Apache
Flink
、
、
、
、
我做了一个poc,在其中我
使用
火花流读取来自
Kafka
的数据。但是我们的组织要么
使用
Apache
或者
Kafka
使用
者来读取
Apache
中的数据作为一个标准过程。所以我需要用
Kafka
消费者或者
Apache
来
代替
Kafka
流媒体。在我的应用程序用例中,我需要从
kafka
读取数据,过滤json数据,并在cassandra中放置字段,因此建议
使用
Kafka</e
浏览 4
提问于2017-03-26
得票数 0
1
回答
用
kafka
从甲骨文中传输数据
、
、
我从
kafka
开始,我需要控制特定Oracle表中的插入,现在通过
kafka
发送新记录。我无法控制数据库,所以原则上,Debizium被排除在外。我该怎么做?不用触发器。我让一个生产者
使用
eclipse中的java程序从Oracle读取数据,但是,这将对数据库发出不断的请求。我
使用
java与
使用
者一起模拟ETL。 PS:我和Windows一起工作,但那是次要的。
浏览 1
提问于2019-07-07
得票数 0
1
回答
Kafka
VS RabbitMQ VS
SQS
周围的支持资源/论坛和社区是否良好/健康?
、
、
、
代表我的公司,我目前正在评估三种面向消息的中间件技术:
Kafka
、RabbitMQ和
SQS
.谁能给我一个提示,关于
Kafka
VS RabbitMQ VS
SQS
的支持和帮助资源,论坛和社区有多好?
浏览 0
提问于2015-01-22
得票数 1
2
回答
Kafka
: java客户端在x次尝试后未能发送消息
、
我试图从Java应用程序向
Kafka
发送消息。(Main.java:26)host.name=192.168.0.1advertised.host.name=192.168.0.1运行的
Kafka
是
kafka
_2.11-0.8.2.1,所以我
使用
了(我猜)适当的Java版本: <dependenc
浏览 3
提问于2015-06-16
得票数 3
回答已采纳
1
回答
websockets在同一AWS可用性区域内的两个相邻服务器之间是否有一个合适的最低延迟和健壮的实时通信协议?
、
、
、
、
我对这类问题没有任何经验,但我有一个很好的websocket库,我很乐意
使用
。我排除了
Apache
,因为获得高吞吐量似乎很昂贵,开发操作(动物园管理员)很难管理,而且我不需要持久性,这只是2台机器之间的通信。所以我希望有一个简单的解决方案。
浏览 4
提问于2019-10-27
得票数 2
1
回答
Mongo
kafka
连接器,反序列化问题
、
、
我正在
使用
kafka
连接,以便从mongo读取数据,并将它们写入
kafka
主题。我
使用
的是mongo
kafka
源连接器。当我尝试反序列化时,到达我的侦听器的消息抛出以下异常。
浏览 1
提问于2020-05-05
得票数 0
1
回答
卡夫卡连接FileStreamSink连接器删除引号,并更改冒号为等号的JSON消息
、
config/worker.properties \> config/connect-file-sink-example_topic_1.properties 最后,我启动了一个用于发送消息的控制台生成器,我输入了一个message.sh bin/
kafka
-
浏览 0
提问于2019-06-27
得票数 1
回答已采纳
2
回答
如何配置从
SQS
获取消息并将其移动到
Kafka
主题的
Kafka
连接器?
、
、
、
、
我有一个想要将消息从
SQS
移动到
Kafka
主题的用例。要
使用
的框架是SpringBoot。因此,无论何时我运行我的代码,它都应该开始移动消息。我搜索了一些文章,但很少。
浏览 7
提问于2021-04-07
得票数 0
2
回答
在无服务器体系结构/ Lambda上运行
Kafka
生产者/侦听器的方法
、
、
、
我有一个完全围绕AWS构建的Microservice体系结构,还包括一个生产者/监听器,它通过
SQS
松散地耦合到业务Lambda函数。
浏览 3
提问于2021-01-19
得票数 0
1
回答
org.
apache
.spark.internal.Logging$class.initializeLogIfNecessary java.lang.AbstractMethodError
、
、
、
我正在运行
kafka
生产者和消费者代码,以便在cdh 5.12中进行测试。当我试图这样做时,我在运行
使用
者代码时面临以下错误。:369) at org.
apache
.spark.sql.
kafka
010:369) at org.
apache
.spark.internal.Logging$class.lo
浏览 0
提问于2018-10-25
得票数 2
1
回答
Apache
Flink
Kafka
集成
、
、
我正在尝试将
Apache
Kafka
2.11-0.10.0.0与
Apache
Flink 1.1.2集成。我正在
使用
scala-shell对其进行测试,并得到以下错误。下面是我在shell中运行的代码 import org.
apache
.flink.streaming.util.serialization.SimpleStringSchemaFlinkKafk
浏览 13
提问于2016-09-15
得票数 1
回答已采纳
1
回答
处于退化状态的DynamoDB连接器
、
、
我正在尝试将
Kafka
主题数据写到本地Dynamodb。然而,连接器状态始终处于降级的状态。下面是我的连接器cofig属性。io.confluent.connect.aws.dynamodb.DynamoDbSinkConnector", "key.converter": "org.
apache
.
kafka
.connect.json.JsonConverter", "value.converte
浏览 3
提问于2021-09-05
得票数 0
1
回答
如何修复` `
kafka
:客户端已经没有可用的代理与之交谈(您的集群可以访问吗?)
、
、
、
我正在开发一个应用程序,它从
sqs
队列中读取消息,对这些数据做一些处理,并将结果发布到
kafka
主题。为了在本地进行测试,我想在我的码头建造中设置一个卡夫卡图像。目前,我能够在本地
使用
docker旋转aws、local堆栈和我的应用程序的容器。另外,我也可以毫无问题地旋转卡夫卡和动物园。我无法得到我的申请与卡夫卡沟通。我试过
使用
两个独立的撰写文件,并且还篡改了网络。最后,我引用了:。container - '8080:80
浏览 0
提问于2019-07-18
得票数 0
回答已采纳
1
回答
创建
Kafka
Producer的演示应用程序为java.lang.InstantiationException抛出“无法构造
kafka
producer”错误:空
、
、
;import org.
apache
.
kafka
.common.serialization.StringSerializerat java.base/java.lang.reflect.Constructor.newInstance(Constructor.java:490) ~[na:na] at org.
apache
.
kafka
.common.util
浏览 35
提问于2019-08-10
得票数 2
回答已采纳
1
回答
AWS
Sqs
源连接器到
Kafka
、
、
、
我还有
SQS
源连接器,它将数据从
SQS
队列传输到我的
Kafka
主题。我想知道怎么做。,我需要在AWS控制台上工作吗?如何
使用
源连接器传输数据?
浏览 5
提问于2021-04-23
得票数 0
1
回答
如何在nodesJS中侦听来自
SQS
的消息?
、
、
、
我试图
使用
SQS
的方式与我们
使用
RabbitMQ或
Kafka
设置侦听器的方式相同。但是,我看不到在
SQS
文档中的任何位置设置
SQS
侦听器的方法: const client = new SQSClient({ }, const command = new ReceiveMessageCommand({ QueueUrl: process.env.
SQS
浏览 3
提问于2022-02-02
得票数 0
点击加载更多
相关
资讯
使用Apache Kafka的Golang实践指南
重温 Apache Kafka
“Kafka技术”Apache Kafka中的事务
Apache Kafka设计理念探究
为什么会有Apache Kafka
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
云直播
活动推荐
运营活动
广告
关闭
领券