tensorflow-datasets 相关问题

TensorFlow的`tf.data`模块使用`tf.data.Dataset`和`tf.data.Iterator`类为构建输入管道提供了一个功能API。

如何将序列馈送到TensorFlow Keras模型?

我想训练一个模型,为一个可变大小的事件序列分配一些分数。每个序列都在自己的文件中,我从(文件名,目标分数)列表开始。所以我做点什么......

回答 1 投票 1

使用tf.data批量处理顺序数据

让我们考虑一个有序的玩具数据集,它有两个特征:值(例如1,2,3,4,5,111,222,333,444,555)sequence_id(例如0,0,0,0,0,1, 1,1,1,1)这个数据基本上由两个......

回答 1 投票 1

使用tf.keras时,from_tensor_slices()使用大numpy数组

我有一些numpy阵列的训练数据 - 它适合内存,但它大于2GB。我正在使用tf.keras和数据集API。为您提供一个简化的,自包含的示例:import numpy as ...

回答 1 投票 1

如何验证TensorFlow数据集中的图像? [重复]

我正在使用以下来自TensorFlow文档的代码创建标签和图像的张量流数据集。 #从文件中读取图像,将其解码为密集张量,并调整大小...

回答 1 投票 0

Tensorflow / models使用COCO 90类ID,尽管COCO只有80个类别

Tensorflows object_detection项目的标签图包含90个类,尽管COCO只有80个类别。因此,所有样本配置中的参数num_classes都设置为90.如果我现在...

回答 2 投票 3

评估Tensorflow张量

要获得输出相对于输入的渐变,可以使用grads = tf.gradients(model.output,model.input),其中grads = [

回答 1 投票 2

内存泄漏与tf.data

我在for循环中创建了一个tf.data.Dataset,我注意到每次迭代后内存都没有被释放。有没有办法从TensorFlow请求释放内存?一世 ...

回答 2 投票 2

使用tf.data.Dataset.from_generator时出现“SystemError:错误返回,无异常设置”

使用tf.data.Dataset.from_generator时,我遇到了一个奇怪的运行时错误。 import tensorflow as tf def gen():while True:yield 0,0 batch =(tf.data.Dataset.from_generator(gen,...

回答 1 投票 0

TensorFlow Dataset.flat_map()会导致批次不均匀

从每个包含10个样本的文件中加载我的输入,并且每批次使用4个样本进行批处理,我得到批次不均匀的4,4,2,4,2,2等批次,而不是批量结合来自...的样本。

回答 1 投票 0

按键和批次按组分组张量流数据集

我目前正在处理tensorflow中的一个问题,我需要生成批处理中批处理中的所有张量都具有特定键值的批处理。如果可能的话,我正在尝试使用数据集api。这可能吗?...

回答 1 投票 2

tf.data.Dataset可馈送迭代器,用于训练和推理

我有一个TensorFlow模型,它使用tf.data.Dataset可馈送迭代器在训练和验证之间切换。两个数据集共享相同的结构,即它们具有特征矩阵和...

回答 2 投票 1

如何在TF 2.0数据集映射步骤中获取和使用张量值?

首先,我使用的是TensorFlow Alpha 2.0。我有正在阅读的TFRecords文件,每个文件都有一个短视频片段,每个帧编码为jpeg字节串以节省空间:{'numframes':...

回答 1 投票 1

使用Tuporflow数据集进行分组,其中每个tupled元素具有不同的形状

我正在尝试修改现有的tensorflow代码。首先,将2d单词矩阵从geneartor和map_strings_to_ints函数转换为数据集,并转换为词汇索引。那么......

回答 1 投票 1

如何使用TF1.3中的新数据集api映射具有附加参数的函数?

我正在使用Tensorflow v1.3中的Dataset API。这很棒。可以使用此处描述的函数映射数据集。我很想知道如何传递一个具有...的功能

回答 2 投票 14

使用数据集生成器的Tensorflow model.fit()

我使用数据集API生成训练数据并将其分类为NN批量。这是我的代码的最小工作示例:import tensorflow as tf import numpy as np import random def ...

回答 1 投票 4

如何为keras模型创建的估算器构建输入函数

我正在创建一个来自keras模型的估算器,如下所示estimator = tf.keras.estimator.model_to_estimator(keras_model = keras_model,model_dir = model_dir)我的模型就像......

回答 2 投票 0

`Dataset.from_tensors`和`Dataset.from_tensor_slices`之间的区别?

我有一个数据集表示为NumPy形状矩阵(num_features,num_examples),我希望将其转换为TensorFlow类型tf.Dataset。我正在努力试图了解其中的差异......

回答 3 投票 24

导入Tensorflow的数据集类

我正在运行Ubuntu 16.04,并使用pip3 install tensorflow通过pip安装了tensorflow。我现在想要导入和使用Dataset类,它是contrib.data包的一部分。在......

回答 1 投票 0

如何在张量流模型中的tf.data管道中提供.h5文件

我正在尝试使用tf.data优化.h5数据的输入管道。但是我遇到了一个TypeError:期望的str,bytes或os.PathLike对象,而不是Tensor。我做了一项研究但找不到任何东西......

回答 1 投票 0

有没有办法在tf.data.Dataset w / tf.py_func中传递字典?

我在数据处理中使用tf.data.Dataset,我想用tf.py_func应用一些python代码。顺便说一句,我发现在tf.py_func中,我无法返回字典。有没有办法做到这一点或......

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.