通过ssh在多台Windows计算机上实现python的并行处理

文章/答案/技术大牛

发布

1回答

python、ssh、parallel-processing

我曾经通过SSH在几台Windows计算机上使用R进行并行处理：#user1 through SSH from the master computer, master_pc. hosts <- list(list(host = "pc1", user = "user

浏览 17提问于2020-05-05得票数 0

1回答

处理二级shell的python ssh脚本

python、bash、ssh

我想编写一个python脚本，将ssh放入服务器并打印一些输出。但我在编码时遇到了一些问题，以下是我基本上想要实现的：[zz@bts01 cdma-msc]$ .但问题是我使用的是python paramiko ssh包，在我执行./sccli命令后，它似乎无法识别第二个shell。我可以做什么来允许python ssh<

浏览 21提问于2018-02-27得票数 0

回答已采纳

1回答

在远程计算机上执行python代码

python、pytest、remote-execution

我正在使用Python库构建一个测试套件，我面临的挑战是，我想在远程windows计算机上运行测试，而不需要在这些远程机器上部署我的python代码。当前解决方案：使用Jenkins，我将测试存储库从位桶克隆到远程计算机，然后通过WINRM使用PowerShell命令在远程机器上执行pytest脚本。所需的解决方案：-- pytest代码/存储库将驻留在计算机(本地&#

浏览 10提问于2022-05-22得票数 0

3回答

从Linux在远程Windows上运行bat文件

windows、linux、batch-file

我正在进行持续的集成过程，我的Jenkins使用Linux平台，但现在我需要在远程pc(Windows)上运行bat文件来开始自动化测试处理和发送报告。有这样做的可能性吗？

浏览 14提问于2012-08-03得票数 1

1回答

如何管理python中的任务队列并在多台计算机上并行运行这些任务？

python、parallel-processing、task

我正在寻找一个python库，它允许:管理任务队列，并行运行任务(在一台或多台计算机上)，允许任务在队列中生成其他任务，并且与UNIX和Windows兼容。我读过一些关于芹菜、RQ、SCoOP、任务管理器部分的多处理以及message部分的redis、rabbitMQ和ZMQ的文档，但我不知道什么是最好的选择。

浏览 0提问于2019-04-25得票数 1

回答已采纳

2回答

R并行连接到远程核心

r、parallel-processing

在R2.14.1中工作，在Windows 7上工作使用R中的并行软件包，我试图利用我的网络上可用的本地机器以外的核心，在那里，我连接的所有远程主机都是相同的Windows机器。这些计算机的设置与我正在处理的计算机完全相同。但是，当未设置此手动标志时，连接命令将挂起。问题是，考虑到我拥有远程主机的</e

浏览 4提问于2014-08-26得票数 5

回答已采纳

1回答

与python中的多处理类似的分布式处理api

python、multiprocessing、distributed-computing

我正在考虑实现一个轻量级的分布式处理框架，它的应用程序接口类似于Python中的。示例如下：## print args ssh_c

浏览 0提问于2014-07-07得票数 0

1回答

这种策略是并行计算还是分布式计算？MPI

parallel-processing、mpi、distributed-computing、distributed-system

我有一个函数来计算适应度值，比如func()。在我的实现中，我使用MPI进行并行化。这在while循环中继续了500次

浏览 2提问于2022-03-07得票数 0

回答已采纳

2回答

为shell脚本中并行运行的命令添加进度条，并跟踪exit_code

python、bash、shell、parallel-processing

我使用一个脚本运行多个python和shell脚本。很少有人使用&并行运行。我的要求是跟踪这个并行运行任务的进度，并显示它，我也希望获得脚本的exit_code，如果任何脚本在执行日志中失败，它说脚本-1/2/3由于x原因失败。#!/bin/bash LOG_DIR

浏览 11提问于2017-08-21得票数 0

回答已采纳

1回答

如何在多台远程机器上运行python脚本？而不安装脚本？

python、python-3.x、sockets、ssh

我创建了一个简单的python脚本，它可以告诉我们它使用的是哪种操作系统。但我希望这个脚本可以同时运行多台远程计算机，而不需要将其安装在同一网络上的其他计算机上。是否可以在远程计算机上运行此脚本，而不在远程计算机上安装此脚本？我看到使用ssh python可以做到这一点。

浏览 28提问于2019-05-01得票数 0

1回答

进程间障碍同步

java、multithreading、parallel-processing、rmi、interprocess

我有一个Java程序，它并行地执行一些计算。我可以在一台机器上运行它，也可以使用多台不同的机器。在单机上执行时，通过使用来自CyclicBarrier包的java.util.concurrent.CyclicBarrier类成功地实现了线程同步。其思想是，所有线程必须等待其他线程到达相同的点，然后才能继续计算。在多台不同的机器

浏览 3提问于2013-11-28得票数 1

回答已采纳

2回答

如何在.Net中跨多台计算机扩展令人尴尬的并行作业？

c#、.net、embarrassingly-parallel

我有一个令人尴尬的并行问题，我想使用.Net扩展多台计算机。我该怎么做呢？

浏览 20提问于2014-03-18得票数 0

2回答

结合两台膝上型电脑增加内存

ram、vaio

我有两台笔记本电脑，有以下规格，我想连接它们，以增加内存，以便我可以提高我需要在家里做的科学计算的性能。2.10GHz 3.00GBRAM顺便说一下，索尼笔记本电脑没有显示器，这是坏的，现在，我想连接这些笔记本电脑，以便我的MATLAB，Fortran和C++程序运行得更好。有时，我需要用我的家用电脑做一些工作。那么，我怎样才能做到这一点呢？我需要购买什么或者安装到

浏览 0提问于2013-07-27得票数 3

13回答

在许多服务器上通过SSH自动运行命令

ssh、scripting、parallelism

并非所有服务器都在known_hosts列表中(在我的PC上，Ubuntu10.04LTS/bash)。理想情况下，我希望在所有服务器上并行运行这些命令。以下是一些潜在的陷阱：给定的命令可能返回一个非零的退出代码，表明输出可能无效。我需要认识到这一点。连接可能无法建立到给定的</em

浏览 0提问于2011-08-19得票数 61

回答已采纳

2回答

我在从数据库中遍历大约一百万个潜在的行时遇到了时间问题。我基本上将这些行放入一个DataTable中，然后循环遍历它们，但它变得越来越慢。另外还有什么选择呢？我可以把这几行分成一块，大概一块两万块。我可以在C#中使用并行处理吗？基本上，代码循环遍历与某个查询匹配的每个潜在记录，并尝试确定它是否是合法条目。这就是为什么每个记录都需要单独访问的原因。一个对象的记录可以达到1000万行。方法看起来像是在多台计算机上

浏览 1提问于2012-03-11得票数 3

回答已采纳

2回答

使用Serenity和JBehave并行执行？

maven、jbehave、serenity-bdd

如何执行并行宁静+ JBehave + Maven测试？我尝试了设置: serenity.batch.size =3 serenity.batch.count =2 但是测试仍然不能并行执行。我的AcceptanceTestSute： public class AcceptanceTestSuite extends SerenityStories { private static

浏览 31提问于2019-03-14得票数 0

2回答

如何在有两台计算机的局域网中建立matlab的并行计算？

matlab、parallel-processing、toolbox

我在两台运行Matlab的计算机(Macbook Pro i5和Macbook Pro i7)上安装了Matlab并行计算工具箱。对于一个论文项目，我们必须进行模拟拍摄，为此我需要大量的计算机能力。我知道parfor的matlabpool选项可以使用我本地计算机上的两个内核。有没有办法通过以太网线或集线器直接连接两台macbooks，并配置一个小型本地网络，这样我就可以同时使用四个

浏览 8提问于2012-10-04得票数 2

2回答

禁用Office 2007应用程序中“文件”菜单中的“选项”

windows-server-2008、group-policy、microsoft-office-2007、user-settings

我们已经将Office 2007部署到办公环境中的多台计算机上(Windows 2008和Windows )，并且需要删除“文件”菜单中显示的“选项”设置。是否有办法通过组策略或类似的方式实现这一目标？谢谢

浏览 0提问于2010-08-24得票数 1

回答已采纳

2回答

Ansible会复制代理上的代码吗？它如何执行这些命令？

ansible

当Chef将您的代码复制到代理时，Ansible是复制代码还是只是转换为命令并执行它们？我已经检查了很多文档，但没有找到任何解释此工作流程的好文档。

浏览 1提问于2017-01-31得票数 1

1回答

R到R通信

r、sockets、rpc

在Linux主机上，我在uni处理器虚拟Windows盒上使用。有些计算我确实花了很长时间，我把它们委托给主机，这样就可以并行地完成它们。我这样做的方式是自动创建R脚本，这些脚本仅由Rscript在主机上执行。我想知道，是否有可能在R会话之间进行基于网络的通信？我知道这个，但是我找不到一个R客户机(尽管文档声明包括简单的R客户机)。它还说，有更好的方式进行R-R

浏览 8提问于2013-09-18得票数 2

回答已采纳

点击加载更多