Slurm-传输文件,本地从头开始
Slurm- transfer files, local scratch
如何将每个节点本地临时创建的文件(无需登录)传输到 Slurm 中的其他地方?我正在寻找类似反转 sbcast.
的东西
Slurm 的反转 sbcast
是 sgather
。
一个关于如何在 5 个不同节点上启动 10 个任务的示例
$ salloc -N 5 --exclusive
$ srun -n 10 -N 5 bash -c 'echo $(hostname):$SLURM_JOB_ID:$SLURM_TASK_PID >> /tmp/file'
$ sgather /tmp/file ./file
$ ls
file.node1273 file.node1274 file.node1275 file.node1276 file.node1285
$ cat file.node1273
node1273:246987:1777529
node1273:246987:1777528
有关选项的详细信息,请参阅 man 1 sgather
。
如何将每个节点本地临时创建的文件(无需登录)传输到 Slurm 中的其他地方?我正在寻找类似反转 sbcast.
的东西Slurm 的反转 sbcast
是 sgather
。
一个关于如何在 5 个不同节点上启动 10 个任务的示例
$ salloc -N 5 --exclusive
$ srun -n 10 -N 5 bash -c 'echo $(hostname):$SLURM_JOB_ID:$SLURM_TASK_PID >> /tmp/file'
$ sgather /tmp/file ./file
$ ls
file.node1273 file.node1274 file.node1275 file.node1276 file.node1285
$ cat file.node1273
node1273:246987:1777529
node1273:246987:1777528
有关选项的详细信息,请参阅 man 1 sgather
。