tensorflow-datasets 相关问题

TensorFlow的`tf.data`模块使用`tf.data.Dataset`和`tf.data.Iterator`类为构建输入管道提供了一个功能API。

我有很多txt文件，所以我做了一个数据集，按照这个教程的tensorflow：https:/www.tensorflow.orgtutorialsload_datatext?hl=es#build_vocabulary 我的程序工作与smalls ...

python tensorflow tensorflow-datasets tensorflow-estimator

回答 1 投票 1

用于分类补丁的Tensorflow数据集流水线

我试图在tensorflow中写一个数据集流水线来标记图像的补丁。现在我从一堆 tfrecord 文件中读取数据，每个文件有多个补丁，但只有一个标签。这个标签 ...

python tensorflow tensorflow-datasets tensorflow2.0

回答 1 投票 1

了解如何使用tf.dataset.map()

我正在将一些原本使用JPEG作为输入的代码转换为使用Matlab MAT文件。代码中包含以下几行： train_dataset = tf.dataset.list_files(PATH + 'train*.mat')......

python tensorflow tensorflow-datasets

回答 1 投票 1

如何将Tensorflow数据集保存到文件？

在SO上至少还有两个这样的问题，但一个都没有得到回答。我有一个数据集的形式。

python tensorflow serialization tensorflow-datasets

回答 1 投票 1

如何重复一个tf.dataset。

tf.dataset实际上有一个repeat方法，输出的东西更像一个磁片，即：list(tf.dataset.range(2).repeat(3).as_numpy_iterator()) # [0，1，0，1，0，1]就像：np......。

python numpy tensorflow tensorflow-datasets

回答 1 投票 1

tf.data: 并行加载步骤

我有一个数据输入管道，它有：输入数据点的类型是不能投射到tf.Tensor(dicts和什么)的预处理函数，不能理解tensorflow类型，需要 ...

python tensorflow tensorflow2.0 tensorflow-datasets

回答 1 投票 7

如何从SequenceExample TFRecord创建窗口化多变量数据集？

我正试图使用 tf.data.datasets 设置一个 Tensorflow 管道，以便将一些 TFRecord 载入 Keras 模型中。这些数据是多变量时间序列。我目前使用的是Tensorflow 2.0 ...

python-3.x tensorflow-datasets tensorflow2.0 tf.keras

回答 1 投票 1

在训练过程中，验证数据集是否每一次都会被初始化？

设置。U-Net网络被训练成处理小的补丁（例如64x64像素）。使用Tensorflow Dataset API给网络输入一个训练数据集和验证数据集。小补丁是...

tensorflow tensorflow2.0 tensorflow-datasets tf.keras

回答 1 投票 1

我想在CSV文件上训练我的模型，每个文件作为一个Label。和图像分类一样，每个文件夹中的所有图像都被贴上了标签

我有一个X,Y,Z坐标的模拟数据集。我想使用TensorFlow对任务进行实时分类。我想知道，我可以使用每个任务的数据，并可以标记多个CSV文件......

csv tensorflow classification real-time tensorflow-datasets

回答 1 投票 0

如何从包含文件名的列表中加载tensorflow数据管道中不同目录的.npy文件？

我试图将numpy数组(x, 1, 768)和标签(1, 768)加载到tf.data中，我的代码如下： import pandas as pdb import pdb import numpy as np import os, glob import tensorflow as tf #from ...

python tensorflow keras tensorflow2.0 tensorflow-datasets

回答 1 投票 0

tf.keras.preprocessing.text.Tokenizer()和tfds.features.text.Tokenizer()的比较。

作为一些背景，我最近对NLP和文本处理的研究越来越多。我对计算机视觉更加熟悉。我完全理解Tokenization的概念。我的困惑是...

python tensorflow keras tensorflow2.0 tensorflow-datasets

回答 1 投票 1

tf数据窗口多输入

我想用tf数据窗口来创建数据集，请问如何在下面的代码中flat_map batch 2输入？如何在下面的代码中flat_map批处理2的输入？我在网上找到的所有例子都是只有1个输入，导入tensorflow为tf def make_window_dataset(ds, ...

tensorflow2.0 tensorflow-datasets

回答 1 投票 0

为解析TFRecord数据集而定义映射函数时遇到的问题。

我以ELWC格式创建了TensorFLow排名的数据集，并将文件保存为.tfrecords文件。将get_descriptor_set()、decode_as_serialized_example_list()和parse()方法原封不动地复制了， ...

python tensorflow-datasets functools

回答 1 投票 0

将`tf.data.dataset`中的数据分发给多个工作者(如Horovod)

使用Horovod，你基本上运行了N个独立的实例(所以这是一种图间复制的形式)，它们通过特殊的Horovod ops(基本上是广播+减少)进行通信。现在我们说......。

tensorflow tensorflow-datasets horovod

回答 1 投票 1

TensorFlow Dataset的函数cache()和prefetch()是干什么的？

我是按照TensorFlow的图像分割教程来做的。在那里有以下几行： train_dataset = train.cache().shuffle(BUFFER_SIZE).batch(BATCH_SIZE).repeat() train_dataset = ....

tensorflow caching dataset tensorflow-datasets prefetch

回答 1 投票 1

什么是TensorFlow中的嵌套结构？

翻看tf.data.datasets的文档，看到经常提到 "嵌套结构"。这到底是什么意思？任何Python数据类型都可以被认为是嵌套的......

python tensorflow tensorflow-datasets

回答 1 投票 3

`tf.function`装饰器导致批处理形状为`NoneType` (Tensorflow2, Python)

在下面的代码中。@tf.function def get_x_y(dataset,count=1): X = tf.TensorArray(tf.float32,count) Y = tf.TensorArray(tf.float32,count) idx = tf.Variable(0,dtype=tf.int32) for batch in ...。

tensorflow2.0 tensorflow-datasets tensorflow2.x

回答 1 投票 0

Python成员操作符 "在 "TensorFlow数据集中。

我正在开发一个输入管道与TensorFlow数据集，数据集只有两列，我想过滤的基础上的值的列表，但我只是可以过滤数据集使用操作符等于"=="，... ...

python tensorflow tensorflow-datasets

回答 1 投票 1

如何从生成器开发一个只输出数组列表的tf.data对象？

我试图开发一个 tf.data 对象来产生一个数组列表但我得到一个数据不匹配的错误。下面是我的尝试 def labelGen(): yield tf.constant([1, 0], dtype=tf.int64), tf......。

tensorflow tensorflow-datasets

回答 1 投票 1

如何只选择一个Tensorflow数据集的一部分，并改变维度。

我希望在UCF101的10个帧段上训练我的模型，没有任何标签。目前我有这样的方法： import tensorflow as tf import tensorflow_datasets as tfds x_train = tfds.load('ucf101', split='......)