使用 Keras 和大数组 Numpy 训练神经网络

问题描述 投票:0回答:0

我想训练一个UNET网络,我的数据已经在数组中标准化,我将它以bin格式保存在我的磁盘中,大约有12GB的数据。我的内存有限,所以我需要加载一批数据训练,并在清除并加载另一批数据后进行训练,但我不知道如何在训练发生时执行此操作。我想使用 Keras 而不是 pytorch,因为我的程序已经全部在 keras 中,但如果最好的方法是 pytorch,我会改变我的东西。我希望有人能帮助我。

我在训练前尝试使用memmap,导入mmap数据,但keras无法识别。

检查图像: importing mmaps trying to training

keras tf.keras large-data mmap unet-neural-network
© www.soinside.com 2019 - 2024. All rights reserved.