Joblib持久性和熊猫

问题描述 投票:1回答:1

有关使用内存映射文件在Joblib中保留Numpy数组的良好文档。

在最近的版本中,Joblib将(显然)自动持久化并以这种方式共享Numpy阵列。

Pandas数据框是否也会被持久化,或者用户是否需要手动实现持久性?

python python-3.x pandas parallel-processing joblib
1个回答
1
投票

由于Pandas数据帧是基于Numpy数组构建的,是的,它们将被保留。

Joblib通过挂钩到pickle协议来实现其优化的持久性。任何在其pickle表示中包含numpy数组的东西都将受益于Joblib的优化。

© www.soinside.com 2019 - 2024. All rights reserved.