腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
多线程
中
的
Kafka
管理
客户端
我有一个带有以下代码
的
Kafka
客户端
final Map<String, Object> configsAdminClientConfig.BOOTSTRAP_SERVERS_CONFIG, "server-ip"); } 此方法由多个线程调用,并创建多个
管理
客户端
所以我想把它保存在一
浏览 7
提问于2020-03-02
得票数 0
1
回答
KafkaConsumer listTopics()方法是线程安全
的
吗?
、
这是否意味着从
多线程
调用这些方法是可以
的
?我想与这里
的
专家确认,以避免生产中
的
任何问题
浏览 3
提问于2020-05-04
得票数 2
2
回答
Kafka
消费者是否可以并行处理多个消息
、
、
我想知道是否有可能读取和处理多个消息由
Kafka
消费者(Java
客户端
)并行..I意味着使用
多线程
...我应该使用rxJava吗??3)并希望使Java
客户端
作为守护服务运行在Linux
中
,这样它就可以连续运行,轮询
Kafka
的
消息,读取和处理相同
的
..is这是
浏览 0
提问于2016-02-24
得票数 0
1
回答
Kafka
-动态/任意分区
、
、
将此操作并行化
的
最佳方法是什么?例如,假设我创建了1000个分区。如果为我
的
主题生成1,001+消息,则将发出前1,000个请求,但之后
的
每条消息都将排队,直到该分区
中
的
前一个请求完成为止。我考虑过让http请求是异步
的</
浏览 3
提问于2015-05-08
得票数 1
回答已采纳
2
回答
不使用zookeeper使用java api创建
Kafka
主题
、
如何使用java为
kafka
0.10.1.x创建无zookeeper依赖
的
kafka
topic?我见过创建主题
的
线程,但它使用zookeeper,zk
客户端
等。我想只使用java,没有scala依赖,因为
kafka
0.10已经不使用zookeeper。
浏览 1
提问于2017-12-11
得票数 0
2
回答
卡夫卡能否通过TCP与ZooKeeper对话,即使卡夫卡为TLS/SSL服务?
、
、
、
我创建了一个3节点
的
ZK组合,作为
Kafka
和(潜在
的
)其他服务
的
共识集群。我现在想让我
的
Kafka
经纪人需要TLS/ SSL,这样
Kafka
客户端
必须通过SSL证书进行通信。但我不想将我
的
3
浏览 5
提问于2016-10-13
得票数 0
回答已采纳
2
回答
如果Python-
kafka
管理
客户端
不存在
Kafka
主题,是否创建该主题?
、
、
使用Python-
kafka
管理
客户端
,我知道如何创建和删除主题。 但是有没有办法检查这个话题是否存在呢?如果不是,那么只有我想创建它。我如何在python -
kafka
管理
客户端
中
做到这一点?我在文档
中
没有看到任何东西。
浏览 3
提问于2020-08-18
得票数 0
1
回答
ZKStringSerializer
的
Scala包问题
、
、
我正在尝试使用ZKStringSerializer类,这是我通过根据整个互联网,甚至在我被计算机重启之前我自己
的
代码,这应该可以让我
的
代码工作这很让人困惑,因为这个文件不应该在任何包
中
,而且我也没有在任何地方指定包。这是我
的
代码:import org.apache.spark.sql.functions._ import org.apache.l
浏览 7
提问于2018-07-03
得票数 1
1
回答
librdkafka上
的
多线程
生产者和消费者应用程序
多个生产者可以共享conf
的
可耻副本吗?如果您不能共享相同
的
dr_cb副本,是否可以共享相同
的
conf?
浏览 27
提问于2016-09-15
得票数 0
1
回答
如果
Kafka
服务器不可用,终止Spring事务
、
、
在我们
的
项目中,我们需要通过许
多线程
定期从第三方获取数据,然后将这些数据推送给
Kafka
。如果目前无法使用
Kafka
服务器,则应该终止流,在下一次预定执行过程
中
应该丢失并重新获取获取
的
数据。此外,还需要使用事务
管理
,因为我们需要将这批消息发送给
Kafka
到不同
的
主题。如果没有发送一条消息,则所有其他消息都应该回滚。 如果
Kafka
Server不可用,我们就遇到了终止执行
的
问题。当事务
管理<
浏览 1
提问于2018-07-16
得票数 2
1
回答
在卡夫卡/以运动为中心
的
结构上构建实时API
、
、
、
我是一个事件驱动
的
数据体系结构
的
初学者,使用
Kafka
/ WebSocket作为核心(目前是Kinesis),并且我有一些关于如何在这种结构上构建一个API
的
问题。我
的
具体用例是,我有大约4种不同
的
数据流进入Kinesis,经过一些处理后,我将它们组合成一个“聚合流”,然后将该流
的
结果存储到一个分布式DB
中
,以用于历史目的。API应该直接使用Kinesis流并将消息中继到
客户端
吗?还是最好在Kinesis流和API
浏览 0
提问于2018-03-19
得票数 1
1
回答
Python
Kafka
多进程vs线程
、
、
、
我可以使用KafkaConsumer在单独
的
线程中使用消息。multiprocessing.Process而不是threading.Thread时,我会得到一个错误:这个和建议使用多处理并行地使用消息是可能
的
。不好意思,原来
的
代码太复杂了,所以我在这里创建了一个示例,希望能够告诉您正在发生
的
事情。job.start() job.join() if __name__ == "
浏览 3
提问于2017-09-29
得票数 4
回答已采纳
3
回答
Kafka
引导-服务器与动物园
管理
员在
kafka
-控制台-消费者
、
我试图测试运行一个卡夫卡节点与3个经纪人和动物园
管理
员。我希望使用控制台工具进行测试。我以这样
的
方式经营制片人:然后,我以这样
的
方式运行消费者:
kafka
-console-consumer --zookeeper localhost:2181 --topic testTopic --from-beginni
浏览 2
提问于2017-01-21
得票数 16
回答已采纳
2
回答
春季-卡夫卡对卡夫卡-客户直接
、
、
、
我有一个基于spring
的
应用程序,需要在
Kafka
上使用/生成事件。我对图书馆
的
选择犹豫不决。直接使用
Kafka
客户端
似乎很简单,而不必
管理
spring和
Kafka
客户端
之间
的
兼容性矩阵: 另一方面,使用spring可以帮助项目规范使用
Kafka
的
配置属性,并为测试添加嵌入式
kafka
。在弹簧靴上使用spring,而不是直接使用
kafka
-
客
浏览 3
提问于2020-01-11
得票数 7
回答已采纳
2
回答
Confluent
的
Kafka
REST代理与
Kafka
客户
、
、
我很好奇Confluent
的
Kafka
REST代理和生产者/消费者在
kafka
官方客户库
中
实现
的
优缺点。我知道Confluent
的
Kafka
REST代理用于
管理
任务和不受
kafka
客户端
支持
的
语言。 那么,卡夫卡客户
的
优势是什么呢?
浏览 1
提问于2018-06-29
得票数 4
回答已采纳
1
回答
为什么
Kafka
Producer不能连接到zookeeper来获取broker元数据,而不能连接到broker
、
、
Kafka
制作人需要一个
kafka
经纪人
的
引导列表才能工作。根据,它需要能够连接到其中一个代理,然后获取关于集群中所有实时代理
的
元数据。现在,所有的代理都已经在Zookeeper中注册了,
Kafka
消费者连接到ZK,ZK处理哪个代理,哪个分区是要读取
的
数据。既然ZK已经有了所有的信息,为什么制片人不能连接到ZK呢?我看到有一些关于这方面的问题,但他们似乎解释了为什么消费者需要ZK &而不是为什么生产者需要经纪人
的
引导列表而不是ZK?
浏览 0
提问于2016-03-01
得票数 5
1
回答
如果我重用向vertx端点中
的
外部服务发出请求
的
自定义
客户端
,一个请求
中
的
用户异常会阻止另一个用户
的
请求吗?
、
、
、
我正在为使用
Kafka
和Flink等工具
的
多个用户建立一个用于缓存数据库查询
的
数据流管道,我对何时需要实现
多线程
感到困惑。 我已经构建了一个包含使用Vertx
的
HTTP服务器
的
用户服务。我为此创建了一个"
kafka
客户机“,并且在每个用户请求到端点时,我创建了这个
kafka
客户机
的
一个新实例来发送请求。如果我为每个传入
的
用户请求创建这个
kafka
客户端
的
浏览 11
提问于2022-06-24
得票数 1
回答已采纳
1
回答
是否可以通过SASL、
kafka
broker及其
客户端
通过SSL连接动物园
管理
员和
kafka
,而无需启用纯文本?
、
我使用
的
是卡夫卡0.10.1版。我通过SSL和它
的
工作fine.Now连接了
Kafka
代理及其
客户端
,我有一个带有一些限制
的
查询。我
的
局限性是 之间
的
联系卡夫卡经纪人和动物园
管理
员通过SASL (因为动物园
管理
员不支持SSL)。我有一个疑问,如果在
Kafka
-Broker<
浏览 0
提问于2017-10-24
得票数 0
1
回答
Apache动物园
管理
员问题与更改默认端口
、
我正在尝试安装Zookeeper和
Kafka
作为基本测试,并且必须将
中
的
客户端
端口更改为可用/打开
的
端口,如下所示,# the port at whichthe clients will connect但是,即使在启动
Kafka
服务器时,在动物园
管理
员属性文件
中
更改了它,它也尝试连接到默认
的
2181端口,如下所示,
浏览 0
提问于2018-09-26
得票数 0
回答已采纳
2
回答
当我们只有一个代理和多个代理时,多重
KAFKA
_ADVERTISED_LISTENERS意味着什么?
、
我很困惑地看码头-撰写文件,所以我想问我
的
问题在这里。在大多数示例
中
,我看到这样
的
配置: image: confluentinc/cp-enterprise-
kafka
:5.3.1我想了解几件与此相关
的
事情:配置代理
的
浏览 2
提问于2020-10-08
得票数 5
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
热门
标签
更多标签
云服务器
ICP备案
对象存储
云直播
腾讯会议
活动推荐
运营活动
广告
关闭
领券