0

dataeng-machine-learning在 step 上运行 codelab 9. 4. Feature Engineering

运行 tarin 作业的笔记本步骤是: %%bash OUTDIR=gs://${BUCKET}/taxifare/ch4/taxi_trained JOBNAME=lab4a_$(date -u +%y%m%d_%H%M%S) echo $OUTDIR $REGION $JOBNAME gsutil -m rm -rf $OUTDIR gcloud ml-engine jobs submit training $JOBNAME \ --region=$REGION \ --module-name=trainer.task \ --package-path=${REPO}/courses/machine_learning/feateng/taxifare/trainer \ --job-dir=$OUTDIR \ --staging-bucket=gs://$BUCKET \ --scale-tier=BASIC \ --runtime-version=1.0 \ -- \ --train_data_paths="gs://$BUCKET/taxifare/ch4/taxi_preproc/train*" \ --eval_data_paths="gs://${BUCKET}/taxifare/ch4/taxi_preproc/valid*" \ --output_dir=$OUTDIR \ --num_epochs=100

无论我运行多少次,它都非常有效。

但是,如果我运行: %%bash OUTDIR=gs://${BUCKET}/taxifare/ch4/taxi_trained JOBNAME=lab4a_$(date -u +%y%m%d_%H%M%S) echo $OUTDIR $REGION $JOBNAME gsutil -m rm -rf $OUTDIR gcloud ml-engine jobs submit training $JOBNAME \ --region=$REGION \ --module-name=trainer.task \ --package-path=${REPO}/courses/machine_learning/feateng/taxifare/trainer \ --job-dir=$OUTDIR \ --staging-bucket=gs://$BUCKET \ --scale-tier=BASIC \ --runtime-version=1.0 \ -- \ --train_data_paths="gs://$BUCKET/taxifare/ch4/taxi_preproc/train*" \ --eval_data_paths="gs://${BUCKET}/taxifare/ch4/taxi_preproc/valid*" \ --output_dir=$OUTDIR \ --num_epochs=100 \ --verbosity DEBUG

大约 40 秒后作业失败。在日志中有这个: The replica master 0 exited with a non-zero status of 2. Termination reason: Error.

我在这里找到了这种用法: https ://cloud.google.com/ml-engine/docs/how-tos/getting-started-training-prediction#cloud-train-single

所以我想它可以使用。

我究竟做错了什么?

4

2 回答 2

3

请注意,“--\”行之后的每个参数都是对 tensorflow 代码的传递,因此取决于各个示例代码。

在这种情况下,您正在运行的示例不支持“--verbosity”标志。查看示例存储库,看起来唯一具有该标志的示例是人口普查估计器示例

于 2017-06-15T16:38:59.213 回答
0

出租车费示例当前被硬编码为 INFO,并且代码不解析 --verbose 标志。

于 2017-06-16T14:06:06.350 回答