parallel-processing 相关问题

与并发处理形成鲜明对比的是,并行处理保证以并行方式执行所有线程级和/或指令级任务,并保证同时执行的代码路径的完成。

Clojure(或 JCE、JVM,或...?)会自动引入并行性吗?

我正在 Intellij Idea 中运行一些 CPU 密集型 Clojure 代码(我认为这并不重要 - 它似乎只是生成一个进程)。根据htop和top,它正在使用所有4个核心......

回答 1 投票 0

JVM(尴尬地)并行处理库/工具

我正在寻找一些东西,可以轻松地在集群上运行(正确编码的)令人尴尬的并行 JVM 代码(这样我就可以使用 Clojure + Incanter)。 我在...

回答 4 投票 0

客户端或 Web 服务中的并行性?

也许你可以在这里帮助我。更多的是关于理解。 我有一个可以通过 http://localhost:port/person/200 调用的 Web 服务。 (200 是该人的 ID)。 当我在兄弟中执行此操作时...

回答 1 投票 0

并行运行具有不同返回类型的异步函数

我在流程函数内调用了 2 个不同的异步函数。 使用 actix_web::结果; 酒吧结构A { // 下面的一些字段。 } 酒吧结构 B { // 下面的一些字段。 } 酒吧异步...

回答 1 投票 0

Xarray/Dask:map_block 计算 - 变量大小不一致

Python 代码的可行示例: 将 numpy 导入为 np 将 xarray 导入为 xr 从 scipy.optimize 导入 curve_fit 将 pandas 导入为 pd 将 xesmf 导入为 xe 从 dask.distributed 导入客户端 定义

回答 1 投票 0

PySpark 中的批量 BM25 搜索

我有一个很大的文档数据集(平均长度为 35 个单词)。我想使用 BM25 找到所有这些文档的前 k 个最近邻居。每个文档都需要与其他文档进行比较

回答 1 投票 0

处理多个异步调用

我有一个包含 ID 等基本信息的书籍列表,我需要调用多个外部 API 端点来获取其余信息,例如图像、参考文献、作者简介等。 这是一种方法...

回答 3 投票 0

我可以在子内核中使用cooperative_groups::sync(grid)(CUDA动态并行)吗?

我有一个使用协作组的reduce内核(包含cg::sync(grid)、cg::sync(cta)、grid.thread_rank()等)。当reduce内核从主机启动时,它可以正常工作。当减少

回答 1 投票 0

Slurm 配置问题:运行进程会阻塞整个节点的核心而不是分配的核心

我在分布式计算环境中配置 Slurm 时遇到问题。当我启动一个只应使用 4 个核心的进程时,它最终会阻塞 n 上的所有 128 个可用核心...

回答 1 投票 0

在我的笔记本电脑中运行 MPI 代码

我是并行计算世界的新手。你能告诉我是否可以在我的双核笔记本电脑上使用 MPI 例程运行 C++ 代码,或者是否有任何模拟器/模拟器可以做到这一点?

回答 4 投票 0

Azure Synapse/数据工厂 - 向 ForEach 小部件提供值时,如何同时运行所有值以避免等待时间?

如何同时运行传递给 ForEach 的多个值? 我打算将 100 多个值从查找传递到 foreach,然后 foreach 同时运行所有值,因为处理时间我...

回答 1 投票 0

声明式 Jenkins 管道;并行批量运行测试用例

在工作中,我们只能在一个特别锁定的 jenkins 实例上运行无人值守的测试,而我无法控制该实例。 该作业从多个存储库中获取测试集合,因此

回答 1 投票 0

R foreach 使用 rpy2 python 永远运行 jupyter 笔记本

我有一个 python jupyter 笔记本,我在其中运行一些数据获取代码,它为我提供了 fcs 文件列表。我在 R 中使用 fcsparser 与 foreach 并行解析这些内容,如下所示: %%R -i 文件 -o 数据...

回答 1 投票 0

在 TestNG 中与 @Factory 并行运行测试类

总共有5个测试班。它们中的每一个都使用 @Factory(dataprovider = "data") 进行初始化。我想要实现的是,每个测试类中的测试方法应该与

回答 3 投票 0

std::sort 比自定义 OpenMP 并行排序算法快得多

我一直在使用 OpenMP 测试并行排序。我实现了奇偶排序算法,该算法比没有 OpenMP 时快 3 倍。然而,std::sort 仍然更快:seq - 100s,parallel - ...

回答 1 投票 0

并行任务在 docker 内运行速度非常慢 - 已解决

我的本地笔记本电脑有 4 核和 32GB RAM。 我的 EC2 采用 c5.8xlarge - 32 核和 64GB GB。 我有一份运行一些并行进程的工作。这是一段具有代表性的代码。 Parallel.ForEach(jobL...

回答 1 投票 0

并行任务在docker内运行速度非常慢

我的本地笔记本电脑有 4 核和 32GB RAM。 我的 EC2 采用 c5.8xlarge - 32 核和 64GB GB。 我有一份运行一些并行进程的工作。这是一段具有代表性的代码。 Parallel.ForEach(jobL...

回答 1 投票 0

并行读取 pandas 数据框中的多个 csv 文件

这个问题是前一个问题的发展: 读取 pandas 数据框中的多个 csv 文件 基本上,我有一组文件,例如: 文件1: #----------------------------------------...

回答 1 投票 0

什么是“虚假分享”?如何重现/避免它?

今天我和并行编程课上的教授对什么是“虚假共享”有了不同的理解。我的教授说的毫无意义,所以我立即指出。她

回答 2 投票 0

如果没有预热,并发 Web 请求会导致异常

我需要在 Linux 操作系统上托管的 ASP.NET 6 服务器上实现并发 WebRequest。我创建了一个屏障实现(BarrierTask 类)来处理并行处理。不过,偶尔...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.