1

从 GCS 加载数据的建议方法是什么?示例代码显示将数据从 GCS 复制到/tmp/目录。如果这是建议的方法,可以复制多少数据/tmp/

4

1 回答 1

4

虽然您有该选项,但您不需要将数据复制到本地磁盘。您应该能够直接从 GCS 引用训练和评估数据,通过使用它们的 GCS URI 引用您的文件/对象 - 例如。gs://bucket/路径/到/文件。您可以在接受文件路径的 TensorFlow API 中通常使用本地文件系统路径的地方使用这些路径。TensorFlow 支持访问数据(和写入)GCS 的能力。

您还应该能够使用前缀来引用一组匹配的文件,而不是单独引用每个文件。

后续注意事项 - 您需要查看https://cloud.google.com/ml/docs/how-tos/using-external-buckets以防您需要适当地 ACL 数据以供培训访问。

希望有帮助。

于 2016-09-30T05:50:55.763 回答