hdf5 相关问题

分层数据格式(HDF5)是一种二进制文件格式,用于存储大量数字数据。

Pandas 数据框 - 是什么原因导致此错误?

我的代码: 框架 = pd.DataFrame({'a': np.random.randn(100)}) 商店 = pd.HDFStore('mydata.h5') 商店['obj1'] = 框架 商店['obj1_col'] =框架['a'] store.put('obj2',frame,foramt='表') 商店.选择(...

回答 2 投票 0

如何将 HDF5 数据集读取为类似 Python 文件的对象?

为了将原始环境声音文件内容与元数据和评估日期保存在一起,声音数据将作为原始声音文件的原始字节到字节流(uint8 数组)复制到数据中...

回答 1 投票 0

Python 大规模数据格式,用于在 AWS 上分布式写入、读取和存储

我正在尝试找出使用传统 Python 数据格式在 AWS 上写入、读取和存储数据的最佳方法。从我的各种谷歌搜索中,我无法找到 Big O notat 的最终列表......

回答 1 投票 0

将 hdf5 gadget2 格式文件中的parttype属性从1更改为X(例如2)

脚本我正在尝试适应我的需求:https://github.com/eltevo/StePS/blob/master/tools/Snapshot_Format_Converters/ascii2hdf5_snapshot.py 该脚本从 ascii 文件中读取所有粒子(wh...

回答 1 投票 0

如何使用HDF.Pinvoke在.NET中使用HDF5创建3D可扩展数据集?

我正在使用 HDF.PInvoke 和 C#。 我已经开发了很多代码来保存二维数据集,一切都运行良好。 我现在希望将一系列 2D 数据集(大小恒定的宽度 * 宽度)写入 3D

回答 1 投票 0

安装用于 C++ 的 HDF5

我正在尝试使用 HDF5 编写 C++ 程序,但我在构建过程中遇到了困难。似乎 cmake 没有找到 HDF5 库。这是我尝试过的: 主要.cpp: #包括 #包括&l...

回答 1 投票 0

使用表而不是h5py访问hdf5文件数据块

我使用 h5py 和表格成功读取了从 MSC/Nastran 生成的 hdf5 文件。现在我正在尝试对 Simcenter/Nastran 生成的文件执行相同的操作,但我遇到了麻烦,因为...

回答 1 投票 0

如何使用 Rust 使用 hdf5-rust 板条箱读取数据集的 HDF5 字符串属性?

我有一个 HDF5 文件,使用 h5dump 查看其结构如下: ❯ h5dump -n GMTCO_npp_d20181005_t2022358_e2024003_b35959_c20181008035331888329_cspp_dev.h5 HDF5“

回答 1 投票 0

将 HDF5 转换为 Parquet 而不加载到内存中

我有一个以 HDF5 格式存储的大型数据集(~600 GB)。由于它太大而无法放入内存,我想将其转换为 Parquet 格式并使用 pySpark 执行一些基本的数据预处理(

回答 2 投票 0

将 HDF5 文件读入 numpy 数组

我有以下代码将 hdf5 文件读取为 numpy 数组: hf = h5py.File('路径/到/文件', 'r') n1 = hf.get('数据集名称') n2 = np.数组(n1) 当我打印 n2 时我得到这个: 输出[15]: 数组(...

回答 7 投票 0

如何从Polars读取HDF5文件?

有没有任何首选方法来处理来自极地的 hdf5 文件?我在文档中找不到任何提及它们的内容。 Polars 似乎是一个很棒的图书馆,但这对我来说是一个主要问题。

回答 1 投票 0

如何在Python中从HDF5中提取数据?

我有以下 HDF5 文件,我可以在数据中提取列表 ['model_cints'],但是,我不知道如何显示列表数据中的数据。 https://drive.google.com/drive/folders/

回答 2 投票 0

如何分离单个数组点中的2个值,源是一个没有标题或数据集标签的HDF5文件

我在数组的一个括号中有 2 个值,左边是 I,右边是信号的 Q 值。 hdf5 文件非常大,目前我正在尝试将每个 br 内的 2 个值分开...

回答 1 投票 0

打开HDF5文件而不修改文件时间戳

我目前正在 R 中编写一个函数,用于将 Linux 计算机上的外部程序(HDF5 中)的输出转换为不同的文件格式。由于我的方式,我需要保留时间戳

回答 2 投票 0

像素级数学

我有包含高光谱数据的 hdf5 栅格文件。 我用 R 编程语言做了 <- paste0(wd,"img1.h5") View(h5ls(f,all=T)) output is of reflectance data is: /SITE-NAME/Refle...

回答 2 投票 0

h5py 将虚拟数据集读入 NumPy 数组时出错

我正在尝试从使用 h5py 创建的虚拟 HDF 数据集加载数据,但在正确加载数据时遇到一些问题。 这是我的问题的一个例子: 导入h5py 将工具导入为 ut 虚拟 = h...

回答 2 投票 0

从 HDF5 文件提取数据到 Pandas Dataframe

首先,感谢您提供的空间。 我来这里寻求帮助,因为我需要从一个文件夹中的多个 .HDF5 文件中提取数据,并将它们放入一个唯一的 Pandas datafr...

回答 1 投票 0

为什么 HDF5 数据集的并行读取在 100% CPU 时达到最大,但仅限于大型数据集?

我正在使用 Cython 使用 64 个线程从 HDF5 文件读取单个数据集。每个线程计算起始索引 start 和块大小 size,并从该块读取到公共缓冲区 buf,wh...

回答 1 投票 0

我想在Spring Boot中使用JHDF5创建h5文件

如果我创建并使用来自屏幕的 json 数据作为文件,Python 会将其读取为字符串,因此我尝试创建逻辑来创建 h5 文件,因为将数据转换为

回答 1 投票 0

macos中使用pip命令安装pyhdf出错

我尝试在 macos 终端中使用 pip 命令安装 pyhdf (https://pypi.org/project/pyhdf/) 包,但遇到以下错误: 收集pyhdf 使用缓存的 pyhdf-0.11.3.tar.gz ...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.