hpc 相关问题

高性能计算(HPC)是指使用超级计算机和计算机集群来解决各种计算密集型问题。

如何从OpenCL设备写入/读取单个浮点值(缓冲区)

关于如何从设备读取数组有很多问题,但我只想从设备中读取一个浮点值。或者它只能从设备读取数组?我为...创建了一个缓冲区

回答 1 投票 0

为RandomizedSearchCV缩放sklearn RandomForestClassifier

我正在一个具有28个CPU和~190GB RAM的集群节点上训练sklearn.ensemble.RandomForestClassifier()。单独训练这个分类器的速度非常快,使用机器上的所有核心并且......

回答 1 投票 3

环回存储的用户级库(HPC中没有用于Spark应用程序的环回设备)

Cray建议使用环回设备在具有Lustre文件系统的HPC集群上运行Spark [1]。问题是大多数HPC群集不为其用户提供对环回设备的访问。所以我 ...

回答 1 投票 0

根据sacct数据选择slurm作业

在使用slurm的集群上,我正在尝试创建在特定时间间隔内提交的作业列表,以便我可以取消它们。手工我可以使用:sacct --format =“JobID,Submit”......

回答 2 投票 -1

优化CPU流水线和缓存访问

我试图建立关于如何编写有效代码的直觉,最小化CPI(每个指令的周期)并最小化缓存未命中和后端绑定性能。我想了解数据如何......

回答 1 投票 1

HPC群集:选择SLURM sbatch中的CPU和线程数

sbatch手册页中使用的术语可能有点令人困惑。因此,我想确保我正确设置选项。假设我有一个任务在一个有N个线程的节点上运行。我......

回答 1 投票 7

如何使用命令行中的rscript命令在R中运行作业数组? [关闭]

我想知道如何使用Rscript函数在R中运行500个并行作业。我目前有一个R文件,顶部有标题:args

回答 1 投票 1

我有12个CPU,1个插槽,每个插槽6个内核,每个内核2个线程 - 这些信息如何与MPI和OpenMP并行化相对应?

我需要为一些计算要求严格的c ++代码实现一些并行计算功能。我已经读过可以使用MPI和OpenMP的组合来实现我所需要的 - MPI可以......

回答 2 投票 1

将参数传递给SLURM批处理脚本中的python脚本

我编写了一个需要两个参数的python脚本,当我在命令行上运行它时工作得很好:pythonscript.py arg1 arg2我需要在SLURM批处理脚本中运行它,但是......

回答 2 投票 0

Ray没有在EC2上发布工作人员

我正在使用Ray模块在AWS EC2上启动Ubuntu(16.04)集群。在配置中,我将min_workers,max_workers和initial_workers指定为2,因为我不需要任何自动调整大小。一世 ...

回答 1 投票 0

如何让GCC完全展开这个循环(即剥离这个循环)?

有没有办法指示GCC(我使用4.8.4)完全展开底部函数中的while循环,即剥离此循环?循环的迭代次数在编译时已知:58 ....

回答 2 投票 9

使用sco指定跨节点的worker的分布

在HPC群集上运行scoop程序时,有没有办法指定跨节点的工作人员分布?我最近才遇到过scoop,到目前为止它似乎是一个很好的工具......

回答 1 投票 2

浮点运算(FLOPs)的定义是什么

我正在尝试使用SIMD(在ARM CPU上)优化我的代码,并想知道它的算术强度(flops / byte,AI)和FLOPS。为了计算AI和FLOPS,我必须计算...的数量

回答 2 投票 0

访问在SGE作业脚本标头中设置的变量

假设我有一个作业脚本,我要求4个内核并在标题中设置内存限制:#! / bin / bash ...

回答 1 投票 0

无法使用ssh在HPC上远程启动jupyter笔记本

我使用以下命令登录HPC:ssh -p 2222 [email protected]然后使用以下命令启动Jupyter笔记本:jupyter notebook --no-browser --port = 9999我有一个url:http:// localhost:9999 /?令牌= ...

回答 1 投票 0

在Julia 1.0.0中本地保存大型数字输出到文件

我正在尝试在hpc-cluster中运行程序。不幸的是,我无法在群集上安装外部程序包(例如,JLD2)。这是一个暂时的问题,应该得到修复。我不想......

回答 2 投票 2

当计算节点上的运行作业失败时,如何使计算节点在Microsoft HPC群集中脱机?

如果一个节点出现问题且该计算机中的可执行文件失败,则队列中的大多数作业都将失败。发生这种情况是因为第一份工作被宣布失败很快,机器变成......

回答 1 投票 0

确保混合MPI / OpenMP在不同的核心上运行每个OpenMP线程

我正在尝试运行混合的OpenMP / MPI作业,以便OpenMP线程由核心分隔(每个核心只有一个线程)。我见过其他使用numa-ctl和bash脚本设置的答案......

回答 2 投票 2

在HPC群集上从八度调用R脚本时出错

我有一个八度脚本脚本调用R脚本在HPC集群上进行一些计算。计算过程如下:在集群上提交作业以获得分配的计算节点...

回答 1 投票 1

如何在PBS中查看超过其壁挂时间的作业的部分输出?

我是新手使用群集计算机来运行实验。我有一个在python中运行的脚本,应该定期打印信息,但我发现当我的工作超过它的壁挂时间时,我得不到......

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.