tensorflow-datasets 相关问题

TensorFlow的`tf.data`模块使用`tf.data.Dataset`和`tf.data.Iterator`类为构建输入管道提供了一个功能API。

Tensorflow:NotImplementedError:reduce()转换当前不支持嵌套数据集作为输入

在Tensorflow 1.12中引入了tf.data.Dataset.reduce()和tf.data.Dataset.window()方法。从发行说明:“新的tf.data.Dataset.reduce()API允许用户减少有限数据集...

回答 1 投票 2

如何将'odgt'(JSON?)格式的注释转换为'csv'格式

我正在使用TensorFlow构建人员识别算法,并希望使用CrowdHuman数据集训练我自己的算法,他们已经预先制作了注释但是使用了odgt格式(他们说...

回答 1 投票 -1

急切执行tf.dataset实例

我用版本2.0构建了一个tf.data.Dataset.from_tensor_slices()。我的输入是一维数组,其中包含用于剪切大型numpy数组(60 GB)的索引。我的管道到目前为止读到......

回答 1 投票 1

以设定比率混合数据集

在tensorlfow数据集中,如何混合2个数据集,从原始数据中获取75%的数据集,从增强数据中获取25%? d = tf.data.Dataset.list_files(“raw_data /”)\ .flat_map(tf.data ....

回答 1 投票 0

从np数组转换后,keras(tensorflow 2.0)中的tensorflow数据集数据的形状是错误的

在本指南之后设置简单的tensorflow 2.0测试时,keras输入层的输入是错误的,但仅在转换为数据集(假装具有正确的形状)之后。跑......

回答 1 投票 2

你如何在tf.data和TFRecords中使用Ragged Tensors?

Tensorflow最近发布了Ragged Tensors:https://www.tensorflow.org/guide/ragged_tensors但是没有关于如何将不规则数据保存为TFRecord的文档,并使用数据恢复它...

回答 1 投票 1

如何使from_tensor_slice的嵌套结构使用tf.py_func包装器在Dataset.map中传递两个参数

我正在尝试使用Dataset.map()创建输入管道,使用py_func包装器映射.h5解析器函数。我想在map函数中传递两个参数:filename和window_size。 ......

回答 1 投票 0

Tensorflow TPU培训:NotFoundError ParallelInterleaveDataset

我正在尝试使用Google Cloud Platform(GCP)上的TPU训练神经网络。我已将文件保存为本地tfrecords并打开在虚拟机(计算引擎)上运行的Jupyter Notebook ...

回答 1 投票 0

Tensorflow数据集的使用

我正在尝试创建一个简单的字符串 - 标签对数据集,并且无法获得tensorflow来正确连接这些对我正在尝试使用Dataset.from_tensor_slices初始化程序和数据集....

回答 1 投票 0

当我通过其他函数调用它时,为什么我无法使用tf.nn.conv2d?

我正在尝试对数据集进行数据扩充。我有不同类型的修饰符,其中之一是高斯模糊。我以前用tf.nn.conv3d映射它,但为了使它更快,我改变了......

回答 1 投票 0

替换已保存图形的输入(数据集迭代器的占位符)后,如何从训练模型中恢复权重?

我试图恢复一个保存的模型,该模型是使用占位符的输入构建的,用tf.Dataset替换占位符并重新训练模型。我按照这里的说明:如何更换......

回答 1 投票 1

张量流管道的大图像切片

我正在使用大型卫星.JP2图像进行图像分割。图像形状:(10000,10000,13)因为13个波段(同一区域有13个不同波长的观测值)uint32我想......

回答 1 投票 2

在TensorFlow中读取以与mnist数据集相同的格式读取新数据集

我有一个深度学习模型,我必须输入大小为100X100的图像。我的数据是火车图像 - x_train(530,100,100),火车标签 - y_train(530,4),测试图像 - x_test(89,...

回答 1 投票 2

如何在tfds.load()之后在TensorFlow 2.0中应用数据扩充

我正在按照本指南。它显示了如何使用tfds.load()方法从新的TensorFlow数据集下载数据集:import tensorflow_datasets as tfds SPLIT_WEIGHTS =(8,1,1)splits = tfds ....

回答 1 投票 4

如何在可初始化的迭代器上使用共享名称

在分布式tensorflow中,我需要在一个worker上处理输入数据并在其他不同的session上使用它们。 “make_initializable_iterator”有一个未记录的参数“shared_name”,但是......

回答 1 投票 0

tf.data.Dataset是否支持生成字典结构?

以下是[https://www.tensorflow.org/programmers_guide/datasets]的一段代码。在此示例中,map函数是用户定义的函数,用于读取数据。并在地图功能,...

回答 2 投票 1

为图像文本配对数据构造TfRecord

我坚持让tfrecords为图像文本对数据工作。这是从numpy数组图像特征和文本文件创建tfrecord的代码,def npy_to_tfrecords(numpy_array,text_file,...

回答 1 投票 0

张量流数据集随后批处理或批处理随后随机播放

我最近开始学习张量流。我不确定是否存在差异x = np.array([[1],[2],[3],[4],[5]])dataset = tf.data.Dataset.from_tensor_slices(x)ds .shuffle(buffer_size = 4)...

回答 2 投票 3

Tensorflow数据集API:使用parallel_interleave并行化tf.data.Dataset.from_generator

在生产环境中,我有来自N个生产者的数据,这些数据必须通过网络。我找到了关于并行化tf.data.Dataset.from_generator的评论,它真正描述了我...

回答 1 投票 4

tensorflow Dataset.from_generator使用生成张量的生成器

我正在尝试将一些代码转换为新的数据集API,以便我可以使用分发策略。以下是我想要做的事情。 def dataset_generator():while True:features,...

回答 1 投票 1

© www.soinside.com 2019 - 2024. All rights reserved.