hdf5 相关问题

分层数据格式(HDF5)是一种二进制文件格式,用于存储大量数字数据。

KeyError:“无法打开对象(对象'examples'不存在)”

我想像emnsit一样创建HDF5ClientData实例时收到此错误。这是我的代码:TestNIST = tff.simulation.hdf5_client_data.HDF5ClientData(“ mynist.hdf5”)并且我添加了一些...

回答 1 投票 0

将单个熊猫数据帧重复添加到h5文件中

我有一个小脚本,旨在从用户输入目录中读取csv文件,并将其转换为单个HDF5文件:path = input('Insert the directory path:')file_list = [] for glob.glob(path )...

回答 1 投票 1

HDFStore:检查多索引(数据列)是否包含特定日期

当前表结构:store.get_storer('stocks')。table Out [65]:/ stocks / table(Table(26543,))''description:= {“ index”:Int64Col(shape =(), dflt = 0,pos = 0),“ values_block_0”:Float64Col(...

回答 1 投票 2


Pytables重复2.5千兆行

我目前有一个.h5文件,其中的表由三列组成:一个64字符的文本列,一个与文本源有关的UInt32列和一个UInt32列,它是...的xxhash。 >

回答 1 投票 0

是否可以将指定的表快速提取到另一个HDF5文件中?

我要解决的问题如下-我运行了一个长时间运行的Python(可能需要花费数小时才能完成)的过程,该过程最多可以生成80000个HDF5文件。由于瓶颈之一是恒定的,因此...

回答 1 投票 0

第一次保存为.h5后,数据帧大小会增加

熊猫数据框文件的大小在首次保存为.h5后会显着增加。如果保存加载的数据帧,文件大小不会再次增加。这让我怀疑是某种meta -...

回答 1 投票 0

在H5PY中,相当于数据类型H5T_STD_U8LE吗?

我正在使用h5py将6个数据集写入新的hdf5。其中3种为一种格式,另3种为另一种格式。对于第一组中的3个,我使用dt =“ s103”来完美捕获数据类型。对于另一组...

回答 1 投票 0

在Julia中,我如何找出Dict {String,Any}是Any的原因?

我对朱莉娅(Julia)非常陌生,如今这些人大多使用Python编写代码。我正在使用Julia来处理和操纵HDF5文件。因此,当我开始写(h5write)时,会出现错误,因为数据参数...

回答 1 投票 3

将熊猫写入HDF5时是否可以指定泡菜协议?

编写HDF5文件时,有没有办法告诉熊猫使用特定的泡菜协议(例如4)?这是一种情况(已大大简化):客户端A使用的是python = 3.8.1(以及pandas = 1.0.0 ...

回答 1 投票 2

从HDF5数据集中提取数据

我有一个要用h5py读取的mat文件,我需要提取np.arrays或其他形式的数据以对其进行分析并绘制图表。在:data = h5py.File('footprints / HuascoFP.mat','r')FP = data [“ ...

回答 1 投票 0

对HDL5库中的'compress2'和其他函数的未定义引用

我正在尝试编写一个名为iPIC3D的代码,它具有一些先决条件库,例如HDF5,H5hut等。我按照指示进行了所有操作。必须先安装所有先决条件,然后运行“ make” ...

回答 1 投票 0

如何使用h5py为每个HDF5列定义单独的数据类型

我已经检查了不同的解决方案,但是不明白如何将它们应用于多维数组。确切地说,我的代码生成的数组比应有的大,如图所示...

回答 2 投票 0

PANDAS pd.read_hdf适用于我的HDF5文件中的某些表,但不是全部表

我正在Python 3.7中使用Pandas,以便从HDF5文件读取数据。 HDF5文件包含MSC Nastran的结果表。 HDF5文件名为'ave_01.h5'HDF5位移表...

回答 2 投票 0

将许多HDF5文件转换为JSON的最简单方法是什么?

我有几个.h5文件文件夹,我需要将它们转换为json。有办法用python做到这一点吗?我需要的代码可以使用.h5文件的整个目录,并使用...

回答 1 投票 0

如何降级使用tensorflow-gpu安装的hdf5

最近我尝试在https://www.youtube.com/watch?v=tPq6NIboLSc之后安装tensorflow-gpu此视频,但是当我尝试导入tensorflow(或keras)时,我的内核死于以下错误...] >

回答 1 投票 0

csv和pandas的更快替代品

我有数据扩充代码,需要附加到csv文件中。数据约为数百万。需要2-3天。有没有更快的选择?在需要附加...的情况下,HDF5有多快...

回答 1 投票 0

[用g ++编译hdf5源

我应该以为我不太熟悉C ++中包含标准库之外的库的程序。在过去的几年中,我几乎专门与...

回答 1 投票 -1

如何从HDF5文件读取非常大的数据集?

我最近开始学习HDF5 API。假设我要读取一个非常大的向量(即一维数组),该向量作为数据集存储在HDF5文件中。它的大小N_SIZE太大...

回答 1 投票 0

读取多处理HDF5文件,更好,多个连接或重复生成

我正在尝试并行处理数据。我有一个存储数据的HDF5文件,每个传感器都有一个表格。传感器的数据独立于其他传感器。我的HDF5文件的结构类似于...

回答 1 投票 3

© www.soinside.com 2019 - 2024. All rights reserved.