parallel-processing 相关问题

与并发处理形成鲜明对比的是,并行处理保证以并行方式执行所有线程级和/或指令级任务,并保证同时执行的代码路径的完成。

Python 中的多处理,其中只有一个线程(进程)可以同时使用一组值中的一个

我正在尝试通过使用 Python 进行多线程(多处理 - 并行化)来自动化一些缓慢的进程。 但是我有一个问题。每个运行的进程都必须取一个pi...

回答 1 投票 0

在 Ansible 中并行解压 zip 存档以加速 playbook 执行失败:“此任务不支持异步。”

我有一个剧本,应该下载并解压多个 zip 文件。这些存档大小为数百 MB 到数 GB,因此这两个步骤都需要一些时间。我想提高性能...

回答 1 投票 0

处理大量传入邮件

我们正在尝试创建一个应用程序来扫描员工收到的邮件中是否存在恶意软件。 我们将有 2 台自动扩展服务器,它们之间有 AWS SQS。 一台服务器用于请求处理 (RS),另一台......

回答 1 投票 0

python并行编程

嗨,我需要一些指导,如何编写执行其他Python程序的程序,但最多一次例如6次,并且始终尝试运行6个进程,即使一个进程结束 我也...

回答 5 投票 0

递归函数内的多线程速度较慢

var msync.Mutex func recurseDirectoriesMultiThread(wg *sync.WaitGroup, photoPaths *[]string, 目录字符串) { 推迟 wg.Done() 项目, _ := os.ReadDir(目录) 对于 _,项目 := 范围...

回答 1 投票 0

这个任务适合rslurm吗?

我有几个实验,我想在每个节点上运行一个实验,每个实验都是具有多个核心的一系列执行。现在我的代码如下所示: 运行种子 <- c(1,2,3...

回答 1 投票 0

R 包 glmmTMB - 模型系列 nbinom2 - MakeADFunObject 中的错误

我可以使用一些快速帮助来使用“glmmTMB”包将族设置为 nbinom2,在 R 中拟合负二项式模型。我选择 glmmTMB 因为它允许指定...

回答 1 投票 0

如何组织并行处理排除具有相同标签的任务?

我有一系列可以并行处理的任务。但是,具有相同标签的任务必须按照 FIFO 顺序进行处理。 类型任务结构体{ 标签字符串 数据[]int } func 进程 (ch chan...

回答 1 投票 0

如何在 Bash 中为 GNU Parallel 创建堆栈或 LIFO

虽然我最初的问题以不同的方式解决了(请参阅此问题下的评论线程,以及对此问题的编辑),但我能够在 Bas 中为 GNU Parallel 创建堆栈/LIFO...

回答 1 投票 0

并行化嵌套foreach循环

文档提到,“并行化嵌套 for 循环时,总是存在并行化哪个循环的问题。标准建议是并行化外层循环。” 然而,...

回答 1 投票 0

ЕPostgreSQL大表并行读取的高效方法

考虑这样一种情况:有一个非常大的表(高达几个 TB),并且由于某种原因应用程序想要完整扫描该表。应用程序上都有多个 CPU 核心...

回答 1 投票 0

如何同时等待多个条件,直到其中任何一个返回 true

这是我的代码: 异步 def fun1(): 结果=假 #一些耗时的操作... 返回结果 异步 def fun2(): 结果=假 #一些耗时的操作... 返回结果 如果...

回答 2 投票 0

mclapply 的正确使用

我正在尝试 mclapply,但运气不佳。在这个例子中我想要做的是创建一个数据框,将其每一行分割成一个列表,将每个列表元素转换为向量并......

回答 1 投票 0

Exadata AUTO DOP(自动度策略)

我有多个 (8) 节点 Oracle Exadata 数据库。 当我在 Exadata 上打开 auto dop 属性时,我收到了有关 Cell 多块物理读取事件的信息,该事件 auto dop 会启动“内存并行性”,因此...

回答 1 投票 0

在 kotlin 中并行化 api 调用

我需要从S3异步调用2个读取操作,然后解析来自S3的数据。 两个文件的总记录约为 24k 尝试使用异步协程,但每个进程在一分钟后触发 前任: 在...

回答 1 投票 0

如何在后台执行GPU相关的繁重任务?

我有一个带有 /analyze URL 的服务器客户端项目,用于使用 GPU 分析某些内容。客户端应用程序通过Python的requests模块向服务器发送带有文件名的请求。 #客户...

回答 1 投票 0

PARALLEL_ENABLE - 何时不使用它

建议在可以并行化时将 Oracle PL/SQL 函数声明为 PARALLEL_ENABLE,以便 DBMS 知道它可以并行运行该函数。 但是函数什么时候可以并行化呢?或者

回答 1 投票 0

Python3:如何将 set_description 与 tqdm.contrib.concurrent process_map 一起使用

我一直在使用 tqdm.contrib.concurrent 中的 process_map :https://tqdm.github.io/docs/contrib.concurrent/ 如何设置进度条的描述,该进度条在每次迭代中都会发生变化? 我...

回答 2 投票 0

有没有办法使用PageFactory框架并行执行测试?

我想并行执行测试。我有 PageFactory 框架。当我并行执行脚本时,事情会变得混乱。驱动程序实例被覆盖。 LocalDriveFactory.Java 封装 com.pom.

回答 1 投票 0

在 R terra 中将单波段栅格并行乘以向量

我想并行执行以下向量*光栅乘法,因为我的向量很长: 图书馆(土地) # 创建一个栅格示例 设置.种子(123) 光栅_示例 <- rast(nro...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.