hdf5 相关问题

分层数据格式(HDF5)是一种二进制文件格式,用于存储大量数字数据。

将通过pandas / pytables编写的大型hdf5转换为vaex

我有一个非常大的数据集,我通过追加将其大块写入hdf5,如下所示:使用pd.HDFStore(self.train_store_path)作为train_store:用于tqdm(filepaths)中的文件路径:具有open(filepath,'rb'...

回答 1 投票 0

空字符串用rhdf5写入数据

我在使用rhdf5将字符串写入hdf5文件中的组时遇到麻烦。这是我的数据:#字符串v

回答 1 投票 0

如何在c ++中将stl :: string写入HDF5文件

我正在Windows平台上使用HDF5 CPP库。基本上我想将复合数据类型写入包含std :: string的H5文件。这段代码没有给出任何错误,但是在写入H5文件时... ...>

回答 2 投票 3

如何在Windows 10上安装HDF5版本1.10.5

我正在使用pycharm 2019.2,尝试运行此代码时收到以下错误:import nltk import numpy import tflearn import tensorflow import from nltk.stem.lancaster import random import json ...

回答 1 投票 0

Pandas无法将csv正确转换为hdf5吗?

我正在处理大型csv文件,并尝试将其转换为hdf5格式。当我尝试使用HDFviewer查看输出时,得到的是奇怪的分段输出,其中包含多个数据集,而不是...

回答 1 投票 1

在具有可扩展时间维度的HDF5中存储时间序列数据

我想将时间序列数据存储在具有可扩展时间维度的HDF5中。我正在为将额外的数据部分写入(追加)数据集的最后一步而苦苦挣扎。主要数据...

回答 1 投票 0

在HDF5文件中查询一系列日期的数据的性能如何?

假设我在HDF5文件中存储了一组简单但大量的时间序列数据。我有兴趣找出有关此操作性能的一些粗略指标。大多数情况下,我担心...

回答 1 投票 0

您如何命名HDF5数据集中的列?

我已经在h5py中建立了一个数据集:f = h5py.File(“ experimentReadings.hdf5”,“ w”)dset = f.create_dataset(“ physics”,(5,4),dtype ='f')我有一个变量名列表:namesList = ['height','mass','...

回答 1 投票 1

hdf5r找到libhdf5_hl.so.100文件的问题

我正在尝试正确加载R包hdf5r,实际上我想使用hdf5r的依赖项,但是我遇到了hdf5r包的问题。我已经安装了hdf5r软件包,并且没有...

回答 1 投票 0

如何修复“ HDF5-DIAG:无法打开文件错误?”>

[尝试运行MEEP仿真时,出现以下错误:HDF5-DIAG:在HDF5(1.10.5)线程0中检测到错误:#000:H5F.c在H5Fopen()中的H5F.c行509:无法打开主要文件:File ...

回答 1 投票 0

我是否可以将目录路径转换为可以馈入python hdf5数据表的内容?

我想知道如何将字符串或路径转换为可以馈入hdf5表的内容。例如,我从Pytorch返回一个numpy img数组,标签和图像的路径...

回答 1 投票 0

将带有图像列的Dask DataFrame保存到HDF5

我正在尝试将各种大小的图像加载到Dask DataFrame列中,并将数据帧保存为HDF5文件格式。这是标准方法:import glob import dask.dataframe as dd import ...

回答 1 投票 0

您可以在pycharm中查看hdf5文件吗?

是否有一种方法/插件可以在pycharm中查看hdf5文件,因此您不必安装HDFVIEW即可手动检查文件?

回答 1 投票 4

HDF如何处理删除的数据集释放的空间而无需重新打包

我特指HDF与使用Pytables / Pandas的接口,但我认为这通常适用于HDF。我知道,一旦删除数据集,HDF就不会回收空间,并且您...

回答 1 投票 0

将带有图像列的Spark DataFrame保存到HDF5

我正在尝试将大小不同的图像加载到Spark DataFrame列中,并将数据帧保存为HDF5文件格式。这是标准方法:import glob import dask.dataframe as dd import ...

回答 1 投票 0

尝试运行VisIt时找不到libGLU.so.1

一般问题,我一直在尝试运行多个程序(VisIt和Athena),并且在这两个程序上都存在类似的问题-无法找到共享库,尽管它们确实存在于其他位置。...]]

回答 1 投票 0

使用h5py保存混合结构化数据

我有一个包含100,000个条目的数据集,每个条目的形式为:{attr1 float [300] attr2 float [300] attr3 float [300] attr4 float attr5 float attr6 float}将其存储在中的最有效方法是什么。 ..

回答 1 投票 -1

无法找到存在的文件(hdf5,h,mpi.h,fftw3.h,libGLU.so.1)-Athena ++和访问所需的文件

对于Linux来说相对较新,并尝试使用一个程序(Athena ++-https://github.com/PrincetonUniversity/athena-public-version/wiki-磁流体动力学代码)进行研究。我有...

回答 1 投票 0

访问以大熊猫格式存储在s3上的HDF文件

我将以HDF格式存储的熊猫数据帧存储在S3上。由于无法将文件指针,URL,s3 URL或StringIO对象传递给read_hdf,我几乎陷入了困境。如果我正确理解...

回答 1 投票 6

处理HDF5文件中的大量大型2D阵列的建议(最佳做法)

我正在使用python程序将 x 数组写入hdf 文件。 然后,我通过一个C程序读取数据,在此我需要它作为输入来进行一些模拟。 我需要这些 x 阵列中的大约 ...

回答 2 投票 1

© www.soinside.com 2019 - 2024. All rights reserved.