我通过SLURM提供了一个大集群。我想在每个请求的节点上启动我的脚本，例如，在每个具有指定数量的核心的节点上启动./calc。例如，在2个节点上，每个节点16个核心。我从sbatch脚本开始 #SBATCH -N 2
srun -N 1 ./calc
浏览 166提问于2021-04-30得票数 0
我可以使用slurm批处理脚本和srun跨多个计算节点启动mpi作业。作为slurm脚本的一部分，我希望启动一个shell脚本，该脚本在作业使用的节点上运行，以收集有关在该节点上运行的作业任务的信息(使用top命令)。我希望shell脚本在节点级别运行，而不是在任务级别运行。shell脚本只在单个计算节
浏览 0提问于2020-04-14得票数 0
1回答
我有一个要在多个节点上执行的R脚本。我展示了slurm代码的循环： 编辑 #!`
dodone
rho.i <- cor_rho(dat.i) file
} 我想
浏览 62提问于2019-05-21得票数 0
3回答
我正在尝试在slurm上运行一些并行代码，其中不同的进程不需要通信。我天真地使用了python的slurm包。但是，我似乎只使用了一个节点上的cpu。例如，如果我有4个节点，每个节点有5个cpu，那么我将同时只运行5个进程。如何告诉多进程在不同的节点上运行？
浏览 1提问于2016-10-11得票数 9
回答已采纳
1回答
假设我想提交一个slurm作业，只分配任务总数(--ntasks=someNumber)，而不指定节点数量和每个节点的任务。在已启动的slurm脚本中，是否有一种方法可以知道slurm为每个保留节点分配了多少个核心？我需要知道这个信息才能正确地为我正在启动的程序创建一个机器文件，它的结构必须如下所示：
一旦作业启动<
浏览 2提问于2020-05-30得票数 2
回答已采纳
我很好奇计算节点在计算时如何与登录节点通信，因为即将运行的脚本与脚本可能读取的其他文件一起存储在登录节点中。import pickle data_list = pickle.load(source_file
浏览 1提问于2018-12-05得票数 2
回答已采纳
1回答
多个节点上的单个R脚本
、、、、
我想利用来自多个节点的CPU核心来执行单个R脚本。每个节点包含16个核心，并通过Slurm工具分配给我。我在UNIX shell中通过以下命令执行它：这在单个节点上工作得很好但是，我还没有弄清楚，一旦我可以访问第二个节点，将ncore增加到32是否足够。R是否自动包含另一个节点上</em
浏览 4提问于2017-12-12得票数 1
回答已采纳
我正在运行大约400个文件通过SLURM管道与批处理。当我用sbatch ./myscript.sh file_x对一个任务排队时，所有的文件都会排队到同一个节点。我在S批处理脚本的开头尝试了一个#SBATCH参数的变体，但没有成功。到目前为止，我尝试过的是：
-n，-ntasks= batch不启动任务，它请求资源分配并提交批处理脚本。此选项通知Slurm控制器，
浏览 0提问于2019-07-10得票数 2
回答已采纳
1回答
我有一个4节点Slurm集群，每个都有6个核心。我想提交一个测试Python脚本(它产生的进程打印正在运行的节点的主机名)，它使用以下多处理： print gethostname()
for i in range(200):pool.close()我用一个SBATCH脚本提交这个脚本</em
浏览 4提问于2015-09-15得票数 4
回答已采纳
1回答
因此，我有一个使用多处理的python脚本，它有4种运行方式，这取决于它在运行时读取的环境变量APP_TYPE。
因此，我使用slurm --array使其并行。问题是，它没有生成4个作业，每个作业都有自己的任务(使用所有节点核在A/B/C/D模式下运行python脚本)，而是每次任务产生次数。也就是说，我运行sbatch batch.sh，它在每个作业中产生4个任务。请注意，我期待着在每个节点上运行<e
浏览 1提问于2021-05-28得票数 0
我的目标是:启动多个代码，按节点分配节点，并将每个节点分配100%。share/Modules/init/bashmodule load openmpi-gcc/4.0.4-pmix_v2
Ranf=8000每个计算每个节点需要
浏览 1提问于2022-05-19得票数 0
回答已采纳
我们的SLURM集群中有一些相当胖的节点(例如，14个核心)。我试图将其配置为可以并行运行多个批处理作业，例如，每个请求3个核心。但是，我不能让它起作用。#!job-name=job1##SBATCH -N 1srun echo $HOSTNAME
摘录自slurm.confNodeName=some-node NodeAddr=192.168.60.106 CPUs=12 State=UN
浏览 0提问于2017-06-12得票数 2
2回答
我有一个R脚本，通过并行和未来的包使用并行计算。在R脚本中设置并行配置的代码是：future::plan(cluster, workers=cl)--cpus-per-task=100 谢谢
浏览 3提问于2022-03-20得票数 2
我正在调用scontrol reboot <nodename>来重新启动SLURM集群中的计算节点。[root@c1 ~]# systemctl status slurmd Loaded:slurmd
浏览 8提问于2020-01-03得票数 0
回答已采纳
我想运行官方视频分类脚本here。 我计划在slurm机器上运行它。如果我想在2个节点上运行这个脚本，每个节点都有8个V100 GPU，我不确定如何正确设置SBATCH参数--ntasks或--ntasks-per-node。
浏览 446提问于2021-01-25得票数 1
我正在尝试使用批处理脚本启动大量作业步骤。不同的步骤可以是完全不同的程序，而且每个程序需要一个CPU。首先，我尝试使用--multi-prog参数对srun执行此操作。我实现了以下脚本(通过sbatch my_script.slurm启动)：#SBATCH -o $HOME/slurm/slurm_out/%j.不幸的是，当增加在作业分配中使用的节点数(例如，
浏览 0提问于2014-06-05得票数 13
回答已采纳
1回答
使用SLURM运行多阶段作业
、、、、
我的问题是，我有一个多阶段作业，需要在集群上运行，其作业由SLURM管理。删除数据库并返回节点。
每个步骤都可以使用单独的bash脚本运行；而脚本的执行和阶段之间的转换则由主节点协调。我的问题是，我知道如何分配节点，并使用SLURM在每个节点上调用单个命令或脚本(在每个节点上作为独立作业运行)。但是，一旦命令在每
浏览 0提问于2015-02-25得票数 0
问题(你感兴趣的原因:我无法控制复杂的工作安排。每个作业都在硬编码端口上启动一堆服务器。如果在一个节点上同时运行这些冲突:-/ (是的，我知道，不要告诉我)。ntasks-per-node=1 -- \
bash -c '\''echo "$(hostname) $(da
浏览 6提问于2021-06-20得票数 2
回答已采纳
2回答
SLURM (特别是s批处理)是否应该自动将用户脚本(而不是作业配置脚本)复制到集群的计算节点以供执行？从我的登录节点执行sbatch文件后，输出文件将在我的一个计算节点上创建，但包含以下内容：Stacktrace/client.jl:460
我正在使用sbatch julia.sbatch运行批处理脚本
浏览 4提问于2019-12-27得票数 2
回答已采纳
1回答
我有一个R代码，我想使用Slurm在几个节点上执行，每一次迭代我的参数都会在一个节点上执行。这是我的Slurm代码：我不想使用作业数组，因为它在
浏览 0提问于2019-05-23得票数 0
云服务器
ICP备案
对象存储
实时音视频
云直播
腾讯云开发者
