2

我在这里读过,现在 Glue 提供了为 Spark ETL 作业倒带作业书签的能力。

不过,我还没有找到任何关于如何做到这一点的信息。“暂停”作业书签选项中的子选项似乎对倒带作业书签很有用,但我找不到如何实现它们(我正在使用 Glue 控制台。)

4

1 回答 1

2

您需要在“作业参数”部分传递以下参数。作业书签已暂停。

job-bookmark-from <from-value>是运行 ID,它表示在最后一次成功运行之前处理的所有输入,包括指定的运行 ID。

job-bookmark-to <to-value>是运行 ID,它表示在最后一次成功运行之前处理的所有输入,包括指定的运行 ID。除了由 标识的输入之外的相应输入由作业处理。

于 2019-11-01T07:37:50.953 回答