0

我正在尝试在 Google Cloud ML Engine 上运行作业,但似乎无法将多个文件路径作为参数传递给解析器。这是我在终端上写的:

JOB_NAME=my_job_name
BUCKET_NAME=my_bucket_name
OUTPUT_PATH=gs://$BUCKET_NAME/$JOB_NAME
DATA_PATH=gs://$BUCKET_NAME/my_data_directory
REGION=us-east1

gcloud ml-engine jobs submit training $JOB_NAME \
    --job-dir $OUTPUT_PATH \
    --runtime-version 1.2 \
    --module-name trainer.task \
    --package-path trainer/ \
    --region $REGION \
    -- \
    --file-path "${DATA_PATH}/*" \
    --num-epochs 10 

其中my_data_directory包含我稍后要阅读的多个文件,问题是--file-path仅包含['gs://my_bucket_name/my_data_directory']而不包含所述目录中的文件列表。

我该如何解决?

提前谢谢了。

4

1 回答 1

-1

由于您在该-- \行之后传递的参数将是用户参数,因此程序如何处理这些参数将在很大程度上取决于您定义的培训师。我会回过头来修改培训程序,让它要么以不同的方式处理目录,要么采用如下的多条路径:

gcloud ml-engine jobs submit training $JOB_NAME \
    --job-dir $OUTPUT_PATH \
    --runtime-version 1.2 \
    --module-name trainer.task \
    --package-path trainer/ \
    --region $REGION \
    --scale-tier STANDARD_1 \
    -- \
    --train-files $TRAIN_DATA \
    --eval-files $EVAL_DATA \
    --train-steps 1000 \
    --verbosity DEBUG  \
    --eval-steps 100

一些有助于开发您自己的培训师的链接:[1] [2]

于 2017-07-14T19:42:56.947 回答