gnu-parallel 相关问题

GNU parallel是一个shell工具,用于使用一台或多台计算机并行执行作业。

如何在与GNU-parallel并行的同时使csh并行化

我具有以下创建多个对象的脚本。我尝试仅在终端中运行它,但是似乎花费了很长时间。如何使用GNU-parallel运行它?下面的脚本...

回答 1 投票 0

[onall上的GNU并行错误

我正在尝试通过ssh发送bash函数,并在所有远程主机上执行它。像这样:f(){echo $ 1; } parallel-—整体-S host1,host2“ $(typeset -f f); f” ::: foo但是,此...

回答 1 投票 0

如何连接到gcloud实例并在启动时或连续一行中运行命令

启动gcloud vm服务器时,我正在尝试运行命令。我在控制台自定义元数据键中添加了以下命令:启动脚本值:#! / bin / bash parallel'screen -d -m python3 ...

回答 1 投票 0

并行运行bash以进行循环

我有这个脚本,它在本地保管库系统中为每个主机执行凭据查找,然后为其运行ansible-playbook。 #!/ bin / bash适用于`cat〜/ .ansible / hosts`中的主机...

回答 1 投票 0

与OpenSees并行的Gnu

我正在寻找一个命令来并行化Gnu Parallel。这是命令:OpenSees 1.tcl OpenSees是一个exe文件,在Windows中为OpenSees.exe,在Linux中为OpenSees。我想要...

回答 1 投票 1

如何在Windows 7中让GNU并行处理git bash?

通过遵循此答案,我能够在git-bash中全局安装GNU Parallel。但是,在运行并行教程中提到的示例命令时,并行-k echo ::: A B C> abc -...

回答 2 投票 1

GNU parallel-如何处理没有空格或换行的列分隔符?

我知道以下情况。 doit(){echo做$ 1睡眠2 echo做$ 1}} export -f doit parallel --colsep','-0 doit ::: 1,2,3 Output1-desired:做1做1。 ..

回答 2 投票 0

优化查找大压缩文件的脚本

我又来了!我想优化我的bash脚本,以减少每个循环所花费的时间。基本上,它的作用是:-从tsv获取信息-使用该信息进行查找...

回答 1 投票 0

调用shell函数,将并行的带有引用的文件名列表作为输入

使用Bash。我有一个导出的外壳函数,我想将其应用于许多文件。通常我会使用xargs,但是这样的语法(请参阅此处)太难看了,无法使用。 ...... | xargs -n 1 -P 10 -I {...

回答 2 投票 0

GNU Parallel使用远程执行不执行任何操作

我只需要一个提示。我正在尝试从GNU并行教程(GNU并行教程)运行以下命令:parallel -S $ SERVER1,$ SERVER2 echo :::在我替换了$ SERVERX的更多主机上运行...

回答 1 投票 0

GNU并行-将输出重定向到具有特定名称的文件

在bash中,我正在运行GnuPG来解密某些文件,我希望将输出重定向到具有相同名称但扩展名不同的文件。基本上,如果我的文件名为file1.sc.xz ....

回答 4 投票 3

暂存空间与主节点磁盘空间中的普通磁盘空间有何不同?

我是HPC的新手,我正在努力设置暂存空间。在正在使用的集群中,我需要使用SLURM工作负载管理器设置Scratch空间。我在与...

回答 1 投票 0

bash:无限期地使用并行命令运行脚本

我有一个日志记录系统,该系统每秒在Ubuntu Server中创建一个新的日志文件。我已经开发了一个名为“ processor.sh”的脚本,该脚本每秒运行一次以从新的...

回答 1 投票 0

GNU并行-如何理解“块大小”设置,并猜测将其设置为什么?

[基于“ large_file”文件大小,“ small_file”文件大小和我正在使用的计算机,如何在具有多个内核的单台计算机上使用GNU并行运行grep时如何设置块大小参数?]] >

回答 1 投票 1

如何与find -exec一起使用GNU并行?

我想解压缩多个文件,使用此答案,我找到了以下命令。查找-name'* .zip'-exec sh -c'unzip -d“ $ {1%。*}”“ $ 1”'_ {} \;如何通过上述命令使用GNU Parallel ...

回答 1 投票 0

将文件列表插入并行rsync

这个问题的答案似乎不适合我将rsync从本地计算机并行化到AWS实例。我已经进行了一次试运行,并获得了包含每个文件要使用的文件路径的文件列表...

回答 1 投票 0

在UNIX主机的所有公共IPv4和IPv6地址上运行`whois`和`host`

[在UNIX shell中,我想编写脚本以获取网关的所有公共IPv4和IPv6地址,将其打印回去,然后在所有找到的地址上运行whois和host。另外,因为我的连接...

回答 1 投票 0

使用ImageMagick和GNU Parallel合并每对图像

我正在尝试合并文件夹中的每对图像,并使用imagemagick将结果合并为PDF文件,并使用GNU Parallel并行处理。并行-N2转换\({1}-旋转30 \)...

回答 1 投票 0

并行运行多个python脚本

我有run_command_list.txt,每行禁止一个命令:time python3 train.py --dataroot ./datasets/maps --name maps_pix2pix --model pix2pix --direction AtoB --checkpoints_dir ...

回答 2 投票 0

寻找AWK替代品以加快此命令的速度

我一直在使用AWK来执行此命令,但是它太慢了。必须使用aws s3 ls命令s5cmd ls s3:// bucket-name / * |来更快地处理此列表。 awk -v AWS_BUCKET =“ bucket-name”'{...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.