我一直在看Tensorflow Dataset(TFDS),似乎真的很有用。我看到的唯一问题是,如果你想使用它,你必须公开上传你的数据集到TFDS。是这样吗?"有什么办法在私人服务器上使用TFDS?仅供内部使用?
如果你想看到你的数据集在 TFDS
你必须把你的数据放在你的 GCS bucket
或在你的 drive
但如果你想让你的数据可以使用一些注册或密码下载,那么你的数据也可以在TFDS中实现,但它不是直接下载和提取的tfds数据管道,用户必须按照 manually downloading instructions
如同 此处.
另外,TFDS有一个公开的GCS bucket,你也可以在里面上传你的数据,但是在上传之前,你必须和TFDS的成员联系(因为他们必须检查你的数据是否可以上传到TFDS GCS),把数据放在TFDS GCS上有很大的帮助,它避免了一些服务器不好的问题,同时用户也可以直接使用你的数据来加载。tfds.load
API。