tensorflow-datasets 相关问题

TensorFlow的`tf.data`模块使用`tf.data.Dataset`和`tf.data.Iterator`类为构建输入管道提供了一个功能API。

如何加速将tensorflow_datasets中的张量转换为numpy数组的代码?

尽管我想将张量转换为tensorflow_datasets中的numpy数组,但是我的代码却越来越慢。现在,我使用lsun / bedroom数据集,其中包含超过300万张图像。如何...

回答 1 投票 1

tf.data.Dataset.map()用于由多个切片组成的数据集

从单个切片创建的数据集的tf.data.Dataset.map()看起来像dataset.map(lambda x:x / 2)。如果数据集是由两个切片创建的,它将是什么样?例如,参见...

回答 1 投票 0

如何控制使用tfrecords和steps_per_epoch读取哪些样本

我目前正在将我的tf代码过渡到tfrecords和tf数据集。在我的应用程序中,训练后的模型通常会在看到所有训练样本之前收敛。因此,我通常设置...

回答 1 投票 0

您如何将固定的len功能写入tfrecord

我在编写tensorflow tfrecord文件的基础知识方面苦苦挣扎。我在python中用ndarray写一个简单的例子,但是由于某种原因,当我阅读它时,它必须是可变长度的,并且...

回答 1 投票 0

出现错误,此行“ res = res / 255.0” TypeError:/不支持的操作数类型:“ NoneType”和“ float”

我正在尝试重塑图像,然后发送模型以预测它使用的是Tensorflow(v-2.0)和python(v-3.6)是哪个数字,但收到错误“ TypeError:/不支持的操作数类型:' ...

回答 1 投票 0

仅tf就可以训练2000万以上的行数据集吗?

我想使用超过2000万行的数据集在tf中训练模型。执行此操作时是否有任何限制/错误?有什么方法/技术可以尝试...

回答 1 投票 0

Keras模型无法减少损失

我提出了一个示例,其中tf.keras模型无法从非常简单的数据中学习。我正在使用tensorflow-gpu == 2.0.0,keras == 2.3.0和Python 3.7。在我的文章结尾,我将Python代码提供给...

回答 2 投票 5

Keras模型无法减少损失

我提出了一个示例,其中tf.keras模型无法从非常简单的数据中学习。我正在使用tensorflow-gpu == 2.0.0,keras == 2.3.0和Python 3.7。在我的文章结尾,我将Python代码提供给...

回答 1 投票 3

Keras模型无法减少损失(使用tf.data API的玩具示例)

我提出了一个示例,其中tf.keras模型无法从非常简单的数据中学习。我正在使用tensorflow-gpu == 2.0.0,keras == 2.3.0和Python 3.7。在我的文章结尾,我将Python代码提供给...

回答 1 投票 3

Keras模型无法减少玩具数据上的损失

这是我的设置。数据样本是形状为(6,16,16,16,16,3)的Numpy数组。为了使事情变得非常简单,我只考虑充满1和0的数组。数组为1的标签为1,数组...

回答 1 投票 1


使用tf.data在Tensorflow-2.0中读取图像和蒙版(用于分割问题)>

我正在尝试通过以下链接读取图像数据集以了解分割问题( 1-类)。我的主文件夹包含两个文件夹,即(a)img(b)蒙版。 img包含图像样本和蒙版...

回答 1 投票 0

哪种标准化方法,最小-最大或z缩放(零平均单位方差),最适合深度学习?

我有代表相对计数(0.0-1.0)的数据,如下例所示。使用公式单元格值(例如23)/列总和(例如1200)= 0.01916计算得出的示例数据...

回答 1 投票 0

使用for循环遍历Dataset TF 2.0

这个问题是关于在make_initializable_iterator()已弃用的情况下如何遍历TF数据集的问题。我使用以下函数读取了数据集:def read_dataset_new(filename,target ='delay'...

回答 1 投票 2

如何从numpy数组中获取tensorflow 2中的窗口化数据集?

想象我有一些数据:some_data = np.array([[1,2,3,4],[5,6,7,8]])看起来像这样:array([[1、2、3 ,4],[5,6,7,8]])每行代表一个不同的观察值,因此它们...

回答 1 投票 2

使用TensorFlow数据集的意外尺寸

我正在尝试使用MNIST数据集上的InceptionV3进行迁移学习。计划是读取MNIST数据集,调整图像大小,然后使用它们进行训练,如下所示:将numpy导入为np ...

回答 1 投票 0

使用tf.py_func产生输入数据

Python版本3.6.3 =版本Tensorflow = 1.3.0我在Keras工作,但现在想直接在TensorFlow工作。我想实现Keras的fit_generator的equivelent因此我...

回答 2 投票 3

如何使用tf.data的可初始化迭代器和可重新初始化的插入器,并将数据馈送到估计器api?

[所有正式的google官方教程都对所有estimator api实现使用一次快照式迭代器,我找不到任何有关如何使用tf.data的可初始化迭代器的文档,并且...

回答 2 投票 5

我应该直接返回数据集还是应该使用one_shot迭代器?

[我正在使用Dataset API构建数据管道,但是当我训练多个GPU并在我的输入函数中返回dataset.make_one_shot_iterator()。get_next()时,出现ValueError:dataset_fn()必须...

回答 1 投票 4

我是否可以使用不同的输入张量相同的模型?我应该避免运行session.run()多次?

我试图建立与trainining和相同的模型(完全连接的MLP),而无需重新运行会话的验证图,而无需使用feed_dict和使用tf.data。通常,使用feed_dict ...

回答 2 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.