腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
3
回答
如何
使用
ZooKeeper
设计
任务
分配
distributed-computing
、
distributed-system
、
apache-zookeeper
其中一个是Leader,负责将
任务
分配给其他流程。
设计
Leader选举流程非常简单:每个流程都会尝试在同一路径中创建一个短暂节点。谁成功了,谁就成了领导者。现在,我的问题是
如何
设计
均匀分配
任务
的过程?有什么秘诀吗?假设有10个工人机器,每个机器运行一个进程,其中一个成为领导者。
任务
在队列中提交,Leader接收
任务
并将其分配给工作人员。每当提交
任务
时,工作进程都会收到通知。
浏览 16
提问于2011-03-07
得票数 12
1
回答
Hadoop
Zookeeper
了解
hadoop
、
bigdata
、
nodes
、
apache-zookeeper
我很难理解
Zookeeper
Hadoop框架。我发现
zookeeper
令人困惑的主要方面是理解它
如何
处理节点之间的一致性,以及它
如何
利用其分布式内存文件系统来处理协调?
浏览 1
提问于2015-06-06
得票数 0
3
回答
阿帕奇·赫利克斯、动物园管理员、梅索斯和埃朗的真实世界例子?
apache
、
erlang
、
distributed-computing
、
apache-zookeeper
、
boinc
我是新来的 我很想知道[BOINC][1]是
如何
向他们的客户
分发
任务
的?他们是否
使用
上述任何一种技术?
浏览 11
提问于2014-07-11
得票数 8
1
回答
zookeeper
初始发现
apache-zookeeper
、
service-discovery
、
apache-curator
我想
使用
(或)作为复制命名服务。假设我运行3台
zookeeper
服务器,我有12台带有不同应用程序的计算机可以连接到这些服务器。Corba命名服务具有UDP广播发现选项,在这种情况下不需要配置文件。
Zookeeper
也有类似的可能性吗?
浏览 4
提问于2013-06-21
得票数 0
回答已采纳
2
回答
什么是
ZooKeeper
以及
zookeeper
是
如何
工作的?
apache-zookeeper
我现在正在读Apache
ZooKeeper
。我在互联网上看了很多文档和文章,但我越来越困惑于
ZooKeeper
到底是
如何
工作的?目前,我知道
ZooKeeper
为跨节点同步提供了一个基础设施,应用程序可以
使用
它来确保跨集群的
任务
是序列化或同步的。它维护了一种由“znode”组成的树型文件系统。另一个问题是,每个znode只能包含1M数据,因为
ZooKeeper
不是
设计
为容纳非常大的数据值的大型数据存储。但是,如果我需要一种存储大量数据的分布式数据库,我
浏览 0
提问于2014-01-16
得票数 0
1
回答
ZookKeeper处方依赖关系
apache-zookeeper
我是第一次接触
zookeeper
,正在尝试
使用
这里实现的一些
zookeeper
食谱:。这样我就不需要自己构建它们了。谢谢
浏览 0
提问于2012-12-28
得票数 0
1
回答
如何
为ECS容器设置固定的专用IP?
amazon-ecs
、
kafka
、
zookeeper
、
aws-fargate
我有一个名为kafka-
zookeeper
的
任务
定义,它有一个Apache代理和一个动物园管理员节点。_| ------------------------ 但我不知道
如何
设置
任务
之间的通信,因为
任务
的私有I一旦启动就会确定。另外,如果一个
任务
由于某种原因而失败,当另一个
任务
在它的位置上被创建时,IP将是不同的。我该怎么处理呢?我也不能给
浏览 0
提问于2020-04-13
得票数 0
回答已采纳
1
回答
如何
在几个程序员之间分配
任务
?
architecture
、
project-management
在项目中,你们
如何
在程序员之间分配
任务
?我计划以班级为单位分配
任务
。我可以提出架构
设计
,并为他们提供接口以供他们实现。
浏览 1
提问于2010-11-06
得票数 3
3
回答
Kafka连接偏移。Get/Set?
apache-kafka
如何
获取、设置或重置Kafka Connect连接器/
任务
/接收器的偏移量?我可以
使用
运行kafka.admin.ConsumerGroupCommand的/usr/bin/kafka-consumer-groups工具来查看我所有常规Kafka消费者组的偏移量。但是,Kafka Connect
任务
和组不会显示在此工具中。类似地,我可以
使用
zookeeper
-shell连接到
Zookeeper
,我可以看到常规Kafka消
浏览 1
提问于2016-06-09
得票数 16
回答已采纳
1
回答
如何
跨
Zookeeper
集群
分发
客户端的最佳实践
apache-zookeeper
我正在
使用
Zookeeper
进行分布式资源锁定。我有一个由7个
Zookeeper
实例和7个应用程序客户端连接到它们的集群。一对一是一种好的策略吗?为什么?是否所有客户端都应该连接到一个
Zookeeper
节点?也许我应该以这种方式减少
Zookeeper
节点的数量?
浏览 0
提问于2013-08-02
得票数 0
1
回答
外部
zookeeper
如何
将集合分布到多个实例?
solr
、
solrcloud
我已经设置了一个外部
zookeeper
合奏,它工作得很好。但是我不能弄清楚
zookeeper
如何
将集合分布在多个实例上?有没有什么方法可以让我们指定
如何
在多台机器上分布集合?
浏览 0
提问于2019-05-06
得票数 1
1
回答
如何
停止kafka连接服务
apache-kafka
、
apache-kafka-connect
我知道,卡夫卡服务器可以
使用
外壳脚本kafka-server-stop.sh关闭,动物园管理员可以
使用
zookeeper
-server-stop.sh关闭 但是,我们
如何
优雅地停止connect-distributed.sh,我没有找到用于连接
分发
的任何停止shell脚本。
浏览 6
提问于2022-02-18
得票数 0
回答已采纳
1
回答
理解风暴建筑
apache-storm
我认为是真的 Nimbus是一个JVM进程,运行在物理主节点上,它接收我的程序(Storm拓扑),接收螺栓和喷口,并从它们生成
任务
。Nimbus询问
ZooKeeper
JVM进程集群的配置,例如在哪里运行这些
任务
,
ZooKe
浏览 0
提问于2016-07-06
得票数 3
回答已采纳
2
回答
zooKeeper
外部vs内部?
hbase
、
apache-zookeeper
我不能很好地理解在内部和外部配置
zooKeeper
管理HBASE,有什么区别,优势和劣势?
浏览 0
提问于2014-01-09
得票数 0
1
回答
普通Java程序与MapReduce java程序在HBase表上的区别
java
、
hadoop
、
hbase
我想知道编写普通java程序和MapReduce程序(用java编写)之间的区别,当两者对HBase表中的相同数据执行相同的
任务
时。那么,普通的java程序将被转换为mapper
任务
,并将来自datanode的数据作为批处理过程处理,还是它将线性地处理数据? 请告诉我,普通的java程序是
如何
在HBase表上处理数据的?
浏览 2
提问于2017-01-04
得票数 1
回答已采纳
1
回答
Docker容器在云上的自动化
docker
、
mesos
、
kubernetes
我正在尝试设置一个
zookeeper
集群。理想的集群大小是2,我想将
zookeeper
容器化。现在,自动化这项
任务
是一个问题。我该
如何
决定我该选什么呢?我知道这更多的是一个
设计
/架构问题,而不是编程问题。如果不在这里,有没有其他我可以发布这
浏览 0
提问于2015-04-24
得票数 0
2
回答
Confluent架构注册表偏移管理
apache-kafka
、
registry
、
schema
、
apache-zookeeper
、
confluent-platform
我们
使用
Confluent Schema Registry作为Avro Schema Repo。我观察到的是,
Zookeeper
中没有Consumer offset管理。这是因为Schema Registry的
设计
方式--不是在
Zookeeper
中存储偏移量,而是在Kafka中存储偏移量,或者这是Kafka中压缩日志/主题的标准
设计
模式吗?
浏览 0
提问于2017-10-16
得票数 0
2
回答
.net的
ZooKeeper
替代方案
apache-zookeeper
在.net中有没有
ZooKeeper
的替代品?除了我们都用来做类似事情的数据库。 我们需要它来选择领导者,并确保一个项目只处理一次,以及各种分布式状态共享。
浏览 1
提问于2010-08-23
得票数 15
回答已采纳
1
回答
zookeeper
是否仅用于kafka ?如果是其他人,那么谁可以给出实时示例?
apache-kafka
、
apache-zookeeper
当我为kafka创建集群设置时,我开始了解到需要设置
zookeeper
quorum来协调kafka代理之间的关系。 除了实时设置kafka之外,我们还有其他
使用
zookeeper
的场景吗?
浏览 6
提问于2020-10-17
得票数 0
1
回答
用于2机架故障切换处理的
Zookeeper
设置
apache-kafka
、
apache-zookeeper
我正在尝试理解
zookeeper
设置的影响和
设计
,因为Kafka的操作依赖于
zookeeper
。
Zookeeper
指定要设置以实现可靠容错的节点的2F+1编号。假设我有2个机架,我在机架A上设置了4个节点,在机架B上设置了5个节点(总共9个
zookeeper
节点),而机架B关闭(5个
zookeeper
节点关闭)。在满足2F+1要求的情况下,它需要11个
zookeeper
节点,而我只有9个节点。因此,
zookeeper
在节点数量较高的机架故障情况下将无
浏览 2
提问于2017-06-09
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
kafka入门、使用场景、设计原理、主要配置、zookeeper、kafka集群
如何使用Zookeeper实现分布式应用配置中心?
如何使用 Firefox 任务管理器
如何使用机器学习算法优化分发链路(上)
如何使用微导流对苹果和安卓APP进行内测分发?
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券