我需要从此位置保存/读取文件-
bucket name - 'bucket_name'
folder - 'user/test'
我需要知道如何连接到这个位置并读/写文件。
我需要从此位置保存/读取文件-
bucket name - 'bucket_name'
folder - 'user/test'
我需要知道如何连接到这个位置并读/写文件。
这是有关如何从 AI Jupyter Notebook 中的云存储读取文件的完整教程
你也可以按照这个分步教程来读/写文件。
import google.datalab.storage as storage
import pandas as pd from io
import BytesIO
def get_bucket(bucket_target):
shared_bucket = storage.Bucket(str(bucket_name))
return shared_bucket
def read_file_from_bucket(file_target):
shared_bucket = get_bucket(bucket_target)
sample_object = shared_bucket.object(str(file_target)
sample_text = sample_object.read_stream()
return sample_text
或者你可以这样做:
import tensorflow as tf
GCS_PATTERN = 'gs://my_bucket/folder/*.tfrec'
filenames = tf.gfile.Glob(GCS_PATTERN)