pickle 相关问题

Python的对象序列化模块。将此标记与Python标记一起用于与使用Pickle存储或加载对象相关的问题。

如何挑选我可以用任意数据测试的训练有素的 NLP 模型

我正在创建一个 NLP SPAM/HAM 分类应用程序,我有一个训练有素的模型,准确度很高 我不确定如何保存此模型以供使用,因此我可以再次运行一些任意文本...

回答 0 投票 0

从 Databricks 文件系统加载 joblib/pickle 文件

我有一个问题:我看不到从 spark 之外的 dbfs(数据块文件系统)加载对象(我可以用 spark 加载数据,但不能用 pandas 加载数据)。 我们要加载的对象是 joblib ...

回答 1 投票 0

Python 多处理管道最大写入大小

我正在使用在 Ubuntu 上运行的 Python 多处理包实现一段代码。为了更有效地在进程之间进行通信,我正在收集要通过多处理发送的数据。

回答 0 投票 0

Python 代码 - 加载自己创建的 pickle 文件时出现 KeyError,但同样适用于通用 caltech 数据集

参考代码:https://github.com/med-air/FedBN/blob/master/federated/fed_office.py 我正在测试使用 office-caltech 数据集的代码。 该数据集采用 pickle 格式。 当我读泡菜时...

回答 0 投票 0

Python Pandas 多处理泡菜错误

我在一个文件夹中有多个 .csv 文件。每个 .csv 文件都有来自股票列表的交易数据。我想从每个 .csv 中获取特定的数据部分(在本例中来自“BABA”代码),并且...

回答 1 投票 0

在 Python 中将使用 Pickle 序列化的对象转换为字符串

我正在尝试将 pickle.dumps 的输出转换为字符串,尽管我遇到了与字符串编码相关的错误消息。 错误代码: 进口泡菜 类测试类: 定义 __in...

回答 1 投票 0

如何在数据库记录中附加 numpy 数组作为泡菜

我需要在数据库记录中添加新的 numpy 数组作为泡菜。 这段代码只是将新数组替换为旧数组。 db.cursor.execute("UPDATE captures SET array_data=%s WHERE id=%s",(pickle.dumps...

回答 1 投票 0

在 Flask 中挑选字典以存储在 Redis 缓存中

我正在尝试将 Flask 线程中的所有用户变量存储在 Redis 缓存中。我在 pickle.dumps 函数中遇到异常: r = redis.Redis(host='localhost', port=6379, db=0)

回答 0 投票 0

如何从多个 pth 文件加载 pytorch 分片模型

我有一个模型,已经使用 FSDP 进行了训练;因此,例如,我有两个 .pth 文件,consolidated.00.pth 和 consolidated.01.pth,其中包含模型的分片权重。我想用模型

回答 0 投票 0

为什么在 find_class 中允许使用受限的 Unpickler 取消自定义类?

我需要反复运行一些代码来训练模型。我发现在代码的一次迭代后使用 pickle 保存我的对象很有用,我可以加载它并在我的第二个项目中使用它......

回答 1 投票 0

在 pickle 序列化异常的情况下返回值而不是整个调用失败

从 dogpile.cache 导入 make_region 超时_秒 = 10 * 60 def my_key_generator(命名空间,fn): fname = fn.__name__ def generate_key(*arg): key_template = fname + "_&qu...

回答 0 投票 0

使用 to_pickle 存储大型 Dataframes

我有一个大约 3-4 GB 的数据集,我使用 pickle 命令将其保存为 tar.gz 格式,这导致输出文件约为 400MB。我想确认 to_pickle 是否有问题,我...

回答 0 投票 0

AttributeError: Can't pickle local object '<locals>.<lambda>' [重复]

我正在尝试腌制使用以下方法创建的嵌套字典: collections.defaultdict(lambda: collections.defaultdict(int)) 我的简化代码是这样的: A类: def funA(自我): #c...

回答 2 投票 0

为什么我无法使用 pickle 打开保存的文件

我使用 pickle 保存了一个经过训练的 ANN 模型(作为 .sav 文件)。我使用以下脚本打开文件: 文件名='TuneMoveTrain24.sav' trained_model = pickle.load(打开(文件名,'rb')) 该...

回答 0 投票 0

python - 任何访问 pickle 的函数都会导致 FileNotFoundError

错误: > 追溯(最后一次通话): > 文件“.\scripts\pickle_threed_future_dataset.py”,第 127 行,在 中 > 主要(sys.argv[1:]) > 文件 ".\scripts\

回答 1 投票 0

如何使用 dill 将输入存储到也被其他人用作子模块的 python 模块?

我开发了一个 python 模块,MyModule。用户将其添加为 git 子模块,并导入多个类和函数。 从 MyModule.MyModuleSubfolder 导入 ClassA 来自 MyModule.MyModuleSubfolder 我...

回答 0 投票 0

我一直收到这个关键错误。谁能帮我修一下?

文件“C:\Users\lando\OneDrive\Desktop\TensorGen\Generator.py”,第 40 行,在 X[0, (sequence_length - len(seed)) + t, char2int[char]] = 1 键错误:'T' 将 numpy 导入为 np

回答 0 投票 0

如何挑选清单?[已关闭]

我试图保存一个列表,只包含字符串,所以它可以在以后访问。有人告诉我使用pickling。我希望得到一个例子。

回答 1 投票 57

一个奇怪的皮克尔故障

这是得到错误的代码:month_date = pickle.load(open("month.dat", "rb"))这是我得到的错误。文件 "UserslvanremPythonTestweatherAI_V2.py",第25行,在... ... ...

回答 1 投票 -1

pickle.load无法在我的本地机器上打开一个(Stylegan2网络)pickle模型,但可以在云端打开。

Stylegan2使用网络pickle文件来存储ML模型。我转移训练好的一个模型,我能够在云服务器上打开。我一直从这个模型生成图像罚款与以下......

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.