我如何打开和处理800PB超沉重的CSV文件?

问题描述 投票:1回答:1

如何打开800 PB的文件?

这是一些数据科学竞赛的文件-807167556410028 kb = 800000,556410028 TB =〜800PB

它已存档为600 mb,但由于尺寸太大,我无法解压缩。是否可以使用熊猫从压缩存档中读取前1000行?

petab

csv bigdata
1个回答
© www.soinside.com 2019 - 2024. All rights reserved.