我对使用Dask分布式作为任务执行器很感兴趣。在芹菜中，可以将任务分配给特定的工人。如何使用分布式Dask？
浏览 2提问于2018-07-23得票数 4
4回答
芹菜多处理并行分布式任务
、、、、
我有一个CPU密集的芹菜任务。我希望在许多think).实例中使用所有的处理能力(核心)来使这个工作完成得更快，(一个带有多处理的芹菜并行分布式任务- I )。术语、线程、分布式计算、分布式并行处理都是我想要更好理解的术语。示例任务： for item in list_of_millions_of_ids:
id = item # do some long complicated equationdatabase.objects(newid=id)
浏览 3提问于2014-05-28得票数 91
回答已采纳
对我来说--根据定义，分布式任务是“调用者想要处理的某种逻辑(主要是执行量)，通过网络传递给分布式服务”。理论上，这些网络上的分布式处理器不需要预先知道任务逻辑。调用方应该提供对这些分布式服务的执行逻辑和数据点引用，一旦任务完成，调用方就会得到结果。
现在，从哈泽尔广播的角度来看，似乎危险广播服务器节点本身需要提前知道逻辑( DistributedTask)。我假设Caller (指向任何hazlecast服务器实例的纯香草hazlecast连接)应该能够将带有序列化对
浏览 0提问于2019-03-13得票数 1
回答已采纳
4回答
C++分布式编程
、、、
有没有用于分布式内存缓存、分布式任务、发布/订阅消息传递的库？我已经在Java中使用了Hazelcast，我想要类似的东西。我知道Memcached是一个内存缓存，甚至是分布式的，但它缺少消息传递和远程任务。
我只需要一些东西来协调服务器集群，而不使用传统的RPC和socket编程。
浏览 1提问于2009-06-29得票数 7
回答已采纳
1回答
我使用python发布和订阅消息队列。rc = redis.Redis(host='127.0.0.1', port=6379)ps = rc.pubsub()r_str = "--8198b507-A--" rc.publish('bdwaf', r_str)rc = redis.Redis(host='localhost', port=6379)
rc.p
浏览 3提问于2017-06-28得票数 1
我编写了一个与tensorflow分布式训练指南相一致的神经网络：
如果集群我想运行关于使用torque进行作业调度和分发的培训，这如何与tensorflow相适应，以及它如何在集群上分配培训？
浏览 1提问于2017-10-02得票数 1
回答已采纳
Dask是一个纯粹的基于python的分布式计算平台，类似于Apache Spark。有没有办法通过REST API运行和监控Dask分布式作业/任务，比如Apache Livy for Apache Spark？
浏览 41提问于2021-09-26得票数 1
在SSIS中，我在ExecuteSQL任务中运行存储过程。它正在执行以下任务：
执行查询"EXEC dbo.mySP“失败时出现以下错误：”Microsoft分布式事务协调器(MS )取消了分布式transaction.Possible失败原因:查询出现问题
浏览 0提问于2015-07-29得票数 0
我在每个节点上运行一个分布式工作人员(指向相同的Kafka集群)。连接器任务是在两个节点上使用http POST请求成功创建的。连接器任务为同一主题生成消息。
注意：我知道分布式工作人员应该有相同的组id来分配任务。但是，我正像上面提到的那样，为一个具体的案例做实验。我想知道这两个分布式工作人员之间共享的是什么，以及如何覆盖这个共享？
浏览 2提问于2019-09-25得票数 0
回答已采纳
2回答
我特别感兴趣的任务，涉及到相当多的人，可以通过使用分布式计算解决。(不是一个全球性项目，例如SETI@Home、折叠@Home等)加密货币挖掘与此无关。
谢谢!
浏览 6提问于2014-03-24得票数 0
1回答
在分布式数据库中分发的是什么？Processing逻辑：处理逻辑或处理元素是分布式的Control：对执行各种任务的控制可以是分布式的，而不是由一个计算机系统执行。
浏览 7提问于2021-09-28得票数 1
2回答
我的问题是专门针对Hadoop的分布式缓存的概念，以及它是否应该被称为分布式缓存。分布式缓存的一个传统定义是“--分布式缓存跨越多个服务器，以便它可以在大小和事务容量方面增加”。在hadoop中不是这样，因为分布式缓存被分发到所有运行任务的节点，即驱动程序代码中提到的相同文件。我的理解是正确的还是我
浏览 4提问于2015-12-08得票数 1
回答已采纳
1回答
我正在尝试利用Infinispan的分布式任务故障转移，但我似乎无法让它工作。关于我正在尝试做的事情的一些背景：taskBuilder = taskBuilder.failoverPolicy(DefaultExecutorService.RANDOM
浏览 2提问于2014-11-27得票数 1
我在c#中有一些web服务器，需要通过HTTP请求提供任务处理。后端在其他机器上的servicebus上工作。当我通过http启动一个任务时，该任务通过总线发送，并且从该任务返回的消息返回到When服务器。如果用户通过另一台机器请求任务状态，我必须能够在与启动实例不同的get服务器实例中获得从总线接收的消息。我想我需要某种具有查询能力的分布式缓存...这个需求看起来类似于NoSql分布式数据库，RavenDb可能是正确的选择。但是对于像我需要的“消息缓存”来说，Rave
浏览 1提问于2011-11-15得票数 0
1回答
为此，我需要创建任务工作人员来异步完成每个任务，如下图所示。
我想并行处理这些信息。芹菜对这个有用吗？有什么建议，我可以选择完成这一点吗？
提前谢谢。
浏览 4提问于2021-12-29得票数 0
1回答
服务将能够完成3类任务，即A、B和C。
我想要的是使服务器上的每个服务在与其他服务器通信时只执行一个类别。如果一台服务器死了，其余的服务器应该协商，其中只有一台应该属于类别。
浏览 4提问于2015-11-26得票数 4
单个批处理作业需要2小时才能完成(要处理的数据约为100万)，因此决定以分布式方式运行，其中一个任务将分布在多个工作节点上，这样它就可以在较短的时间内执行。工作流中的其他作业(都是分布式的)需要一个接一个地按顺序运行。作业是多节点分布式作业(主/从架构)，需要一个接一个地运行。 现在，我正在考虑在airflow上部署工作流。因此，在探索时，我找不到任何方法来运行分布在多台机器上的单个任务。这在气流中是可能的吗？
浏览 88提问于2021-11-23得票数 0
回答已采纳
1回答
(这意味着，在每个下一个循环中，同样有9个func()调用被并行化)但是，在这里，我在不同的机器上执行，所以我应该把它看作是分布式计算吗？
浏览 2提问于2022-03-07得票数 0
回答已采纳
1回答
我正在设计一个分布式系统。该系统由多个生产者、分布式队列和多个消费者(又名工人)组成。
解决这一问题的方便方法是什么？
浏览 1提问于2017-01-11得票数 0
回答已采纳
3回答
我有一个项目，该项目的任务是在各自的并行分布式环境中实现矩阵乘法(至少在2台计算机上)。我想用JAVA解决我的问题。矩阵乘法没有问题，只是不知道在并行分布式环境中使用哪种技术。你有什么建议？谢谢:)
浏览 0提问于2011-12-01得票数 0
云服务器
ICP备案
对象存储
云直播
腾讯会议
腾讯云开发者
