腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
获取
正在
运行
的
Kafka
集群
上
的
所有
属性
?
、
我有一个
运行
中
的
Kafka
集群
。如何
获取
正在
运行
的
集群
的
所有
属性
? 我
正在
查看第一次启动
集群
时打印出来
的
属性
列表。 谢谢
浏览 7
提问于2021-02-02
得票数 0
1
回答
集群
中
的
kafka
机器和
kafka
通信
我们有3个
kafka
代理节点和3个zookeepers服务器
的
kafka
集群
kafka
版本- 10.1 ( hortonworks ) 据我所知,因为
所有
元数据都位于zookeeper服务器
上
,而
kafka
代理
正在
使用这些数据(
kafka
通过端口2181与zookeeper服务器交谈) 我想知道是否每台
kafka
机器都与
集群
中
的
其他
kafka
浏览 34
提问于2019-02-07
得票数 1
1
回答
我如何向我
的
合流展示不同的卡夫卡?
、
我安装合流,它有自己的卡夫卡。我必须更改哪个.properties or whatelse文件以使其看起来不同。
浏览 0
提问于2020-04-15
得票数 0
回答已采纳
2
回答
Kafka
Broker -和Zookeeper一样吗?或者KafkaProducer是经纪人?
、
、
我在试着找到启动代理
的
代码?props.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG, IKafkaConstants.
KAFKA
_BROKERS
浏览 3
提问于2018-08-03
得票数 2
1
回答
Kafka
连接-如果我不能直接访问
Kafka
集群
,可以使用吗?
、
、
建议使用
Kafka
-Connect,但由于它是多租户
集群
,Ops团队可能无法提供直接访问,甚至无法
运行
插件安装命令。我们有自己
的
托管虚拟机,可以在其中部署应用程序实例。Ques -有没有可能通过在我们
的
VM
上
安装连接器插件而不是在Confluent
Kafka
上
安装连接器插件来在分布式模式下
运行
Kafka
-Connect?在Confluent
Kafka
上
不
运行
任
浏览 5
提问于2020-06-18
得票数 0
1
回答
Kafka
中
kafka
.common.OffsetOutOfRangeException异常
的
原因是什么
我
正在
使用
Kafka
Mirrormaker来模拟到
运行
Spark
的
弹性MapReduce
集群
的
生产流量。下面是我
的
设置:2)
Kafka
Mirrormaker
的
第二个实例使用1)中创建
的
测试
Kafka
实例,并发布到新
的
Ka
浏览 0
提问于2018-12-28
得票数 0
2
回答
在不同
的
服务器
上
运行
Kafka
和
Kafka
-connect?
、
我想知道
Kafka
和
Kafka
-connect是否可以
运行
在不同
的
服务器
上
?因此,连接器将在服务器A
上
启动,并将数据从服务器B
上
的
kafka
主题发送到HDFS或S3等。
浏览 3
提问于2017-07-12
得票数 3
1
回答
Kafka
流程序
正在
重新处理已经处理
的
事件
、
我
的
程序开始处理这些事件并完成。过了一段时间,我停止了我
的
Kafka
流应用程序,并重新启动。观察到我
的
Kafka
流程序
正在
处理已经处理过
的
以前
的
事件。根据我
的
理解,
Kafka
流在内部维护每个应用程序id输入主题
的
偏移量。但是在这里,重新处理已经处理
的
事件。 如何验证对卡夫卡流进行了哪些偏移处理?卡夫卡流是如何坚持这些书签
的
?卡夫卡流将在什么基础
上
浏览 0
提问于2017-11-22
得票数 1
回答已采纳
1
回答
Flink
Kafka
连接器SSL支持
、
我们在生产环境中有一个安全
的
Kafka
集群
(使用TLS加密、基于证书
的
客户端身份验证和ACL)。我
正在
尝试弄清楚如何使用适当
的
设置配置Flink
Kafka
连接器,以便它可以安全地连接到我们
的
Kafka
集群
。Flink可以做到这一点吗?我是否必须通过
属性
传递安全配置内容?我们
的
Flink
集群
运行
在Kubernetes (1.14.2)
上<
浏览 39
提问于2019-08-14
得票数 1
2
回答
电火花流卡夫卡在CDH 5.8.3中
的
集成
、
、
、
我正面临一个奇怪
的
问题,在
运行
星火流作业阅读卡夫卡。我
正在
使用CDH5.8.3发行版: Spark版本为1.6.0,
Kafka
版本为0.9.0。我
的
代码非常简单: val kafkaParams = Map[String, String]("bootstrap.servers" -> brokersList, "auto.offset.reset,我没有错误.如果我在纱线-
集群
模式下
运行
该程序,我将得到一个异常。org.apache.
浏览 2
提问于2017-01-05
得票数 3
回答已采纳
2
回答
快速启动卡夫卡消费者无法连接到卡夫卡容器
、
、
、
、
我
正在
尝试部署两个Spring引导应用程序(卡夫卡生产者和消费者)。当我将生产者部署到坞时,一切正常,但是当我部署时,我
的
使用者就不能工作了,因为它与
kafka
容器没有连接。ENABLE_AUTO_COMMIT_CONFIG = "false";} 当我在电脑
上
安装zookepper和
kafka
并使用intellij
运行
这两个春季引导应用
浏览 1
提问于2019-11-17
得票数 0
回答已采纳
2
回答
带有2个
kafka
输出
的
文件节拍
、
当我尝试同时向2个
Kafka
节点发送数据日志时,Filebeat出现问题output.
kafka
: hostsxxx.xx:9092", "192.168.zzz.zz:9092" ] timeout: 30s两个
kafka
服务都在
运行
,但只有第
浏览 2
提问于2018-11-17
得票数 0
1
回答
如何使用Apache Nifi在多个节点
上
运行
Kafka
消费者处理器实例
、
目前我们使用Apache NiFi通过
Kafka
consumer消费消息。
kafka
客户端
的
输出连接到hive处理器。 我
正在
研究如何在nifi
集群
上
运行
kafka
消费者实例。我有3个节点
的
nifi
集群
和一个有3个分区
的
kafka
主题,我希望
kafka
消费者能够在每个节点
上
运行
,这样每个消费者可以从一个主题分区轮询消息。在我启
浏览 3
提问于2019-08-04
得票数 0
2
回答
连接到Apache
Kafka
多节点
集群
中
的
Zookeeper
、
、
、
设置多节点Apache ZooKeeper
集群
server.1=zNode01:2888myid文件应该只包含Z节点
的
id (‘1’表示zNode01,‘2’表示ZNode02,依此类推…)在
集群
的
每个节点
上
,修改
浏览 2
提问于2016-07-26
得票数 2
回答已采纳
0
回答
Kafka
集群
部署配置
的
最佳实践?
我在这里请求一般
的
最佳实践:如果我想
运行
Kafka
Connect distributed worke
浏览 6
提问于2017-06-01
得票数 0
回答已采纳
1
回答
Spark结构流批量查询
、
、
我是第一次接触
kafka
和spark structured streaming。我想知道spark in batch模式是如何知道从哪个偏移量读取
的
?如果我指定"startingOffsets“为”最早
的
“,我只会得到最新
的
记录,而不是分区中
的
所有
记录。我在两个不同
的
集群
中
运行
了相同
的
代码。
集群
A(本地机器)
获取
了6条记录,
集群
B( TST
集群<
浏览 0
提问于2020-10-24
得票数 0
2
回答
在不同
的
服务器
上
消费和生成
Kafka
消息
、
、
、
如何生成和使用来自不同服务器
的
消息?我试过了Quickstart教程,但是没有关于如何设置多服务器
集群
的
说明。我
的
脚步1)bin/zookeeper-server-start.sh config/zookeeper.properties 2)bin/
kafka
-server-start.sh config当我
运行
1A)使用者并在生产者中输入消息时,使用者中不会出现任何消息。当我
运行
1B使用者时,我会在服务器A中得到一个巨大<em
浏览 6
提问于2017-04-03
得票数 1
1
回答
kafka
中指向不同主题
的
多个连接器位于同一个节点。
、
我已经创建了两个卡夫卡连接器在卡夫卡-连接使用相同
的
连接器类,但有不同
的
主题,他们听。谢谢
浏览 0
提问于2018-07-18
得票数 1
回答已采纳
2
回答
文件夹中
的
流式文件
、
、
、
我要把流媒体应用从flume转移到
kafka
。我有一台windows机器,在其
上
,由物联网传感器在特定位置(例如D:/Folder )连续生成CSV文件。我想把它转移到hadoop
集群
。 1)在传输日志文件之间是否需要
kafka
集群
/代理,或者是否可以直接从windows机器传输到hadoop linux机器?2)是否可以在windows和hadoop linux机器
上
安装
kafka
,然后将CSV文件直接发布到ha
浏览 4
提问于2017-12-26
得票数 0
2
回答
卡夫卡从多个独立经纪人那里沉了下来
、
我希望将多个数据库
的
更改聚合到一个数据库中,因此我想在每个数据库旁边
运行
一个Debezium连接器和一个
Kafka
服务器/broker,并使用
Kafka
接收器连接器从
所有
的
Kafka
中使用,将其写入一个数据库问题是,我能否同时使用
Kafka
接收器连接器
的
一个实例,使用多个独立
的
Kafka
代理(而不是
集群
)。
浏览 0
提问于2021-08-29
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
如何将kafka中的数据快速导入Hadoop?
CDP中Kafka配置
10分钟带你玩转Kafka基于Controller的领导选举!
4.kafka生产者&消费者
如何在Kubernetes中管理和操作Kafka集群
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券