multiprocess 相关问题

关于在单独的进程中运行并行代码(与多线程不同)和/或与来自PyPI的包`multiprocess`相关。

写入共享内存中的 numpy 数组失败超过特定大小阈值,但仅限于 IDE 中

我正在尝试实现一个共享的 numpy 数组以用于多处理。它在较小的数组上运行良好,但当我尝试使用 ~2.7GB numpy 数组(约 5.6Mx64 矩阵)时失败。过了一会儿...

回答 1 投票 0

如何将多进程池贴花为变量并将其导入到另一个Python文件中

我有两个python文件。 文件:multiprocess_pool.py 从多处理导入池 A = 池 (5) 文件:main.py 从 multiprocess_pool 导入 A 定义开始(x): 打印(x+1) 如果 __name__ == '__ma...

回答 1 投票 0

在所有子进程之间共享 Singleton 类的属性,而不将其作为函数参数传递

我有一个 Singleton 类,我想在所有进程之间共享该 Singleton 类的属性,而不将其作为共享变量通过函数参数传递。 示例代码如下: ...

回答 2 投票 0

如果删除“signal.signal”函数调用会发生什么

我有这个遗留代码,我想为其添加错误处理。令我惊讶的是,我发现其中的 try 和 except 不起作用。经过一番调试,结果发现这是因为 signal.signal(

回答 1 投票 0

关于 Windows 上的多进程

各位 我是 python 和学习多进程的新手,但是当我遵循 python multiprocessing.shared_memory(text) 的文档时 我遇到一些问题 我几乎从文档中复制了代码,但我无法获取

回答 1 投票 0

在父进程中处理 Fork 失败时的 SIGTERM - 资源清理问题

我的多进程应用程序遇到问题,其中主进程创建子进程,并且每个子进程进一步分叉。如果达到分叉的系统限制,则...

回答 1 投票 0

Python 中的多处理,其中只有一个线程(进程)可以同时使用一组值中的一个

我正在尝试通过使用 Python 进行多线程(多处理 - 并行化)来自动化一些缓慢的进程。 但是我有一个问题。每个运行的进程都必须取一个pi...

回答 1 投票 0

如何并行运行此过程

我想编写一段多线程代码来创建一个推理会话并同时运行多个图像。我发现这段代码创建了一个进程,Process 类中是否有任何参数可以...

回答 1 投票 0

如何在Python中暴力破解5个字符以多进程或多线程破解sha256?

4个角色和Pool.map一切正常,运行时间约为46秒 将多处理导入为 mp 从 tqdm 导入 tqdm 从 hashlib 导入 sha256 从字符串导入可打印 来自 itertools imp...

回答 1 投票 0

打开 MPI 无法生成进程

我正在尝试运行一个使用命令 MPI_Comm_spawn 生成工作程序的程序,但是假设我将要生成的进程数设置为 4,主进程将生成 3 个并且...

回答 1 投票 0

我想运行两个不同的主进程

我想杀死第一个进程,然后我想运行第二个进程。我怎样才能做到这一点? 我想在嵌入式linux中做,我该怎么做?我不知道。任何示例都会有帮助。 第二个

回答 1 投票 0

Python |执行一个函数并继续代码而不等待它完成

所以我希望我的代码运行一个函数并继续而不等待它完成,它基本上发生在后台并且代码继续运行 我尝试了并发、异步和

回答 1 投票 0

使用 tqdm 和多进程,进度条会使代码速度减慢 5 倍

我使用 tqdm 在 2.7 python 代码中添加了一个进度条,但它显着减慢了我的代码速度。例如,如果没有进度条,则需要 12 秒,而如果有进度条,则需要...

回答 1 投票 0

Python:Multiprocessing.Process 有时不调用目标函数

我有一个每天运行的脚本,在调用进程时,在 100 多个进程中,有时随机有 2 或 3 个进程没有启动,并且我的目标函数没有被调用。这开始发生

回答 2 投票 0

尝试优化时出现 BrokenProcessPool 错误

(我提前道歉,如果我描述我的问题很糟糕并且我缺乏行话知识。我是一名量子计算物理学家,刚开始学习机器学习!)。 我正在尝试运行

回答 0 投票 0

Multiprocessing process.start() 在笔记本中什么都不做?

我有 5 个独立的函数要并行执行: #定义BO获取函数 acquisition_function = UtilityFunction(kind="ei",xi=1e-1) # 定义包装函数 ...

回答 0 投票 0

Building a Pandas dataframe using multiprocessing leads errors

我正在尝试使用一个接受一些参数并返回部分数据帧的函数来构建一个大数据帧。我有一长串文件要解析和提取相关信息,这些信息将......

回答 1 投票 0

该函数已在前一个单元格中定义,但错误提示未定义

我正在使用 jupyter notebook。以下代码使用 metpy 包中定义的一些函数 (dewpoint_from_relative_humidity) 来定义一个新函数“calc”。 将 numpy 导入为 np 进口

回答 0 投票 0

如何在Windows ( C++ )中创建进程来运行另一段代码?

我正试图在一个简单的cpp程序中创建一个进程,并希望在这个进程中运行另一段来自不同源文件的代码。我发现Windows的CreateProcess API允许我们...

回答 1 投票 1

为什么多线程速度慢?

实现了使用合并排序的具有1000000个节点的三个链表的多进程和多线程实现。我比较了所执行程序的实时性,但是多线程...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.