因此,在使用 DataflowRunner 时,我们使用 filesToStage 方法将文件暂存到 GCS,但在 DirectRunner 中不会发生这种情况。有没有办法让 DirectRunner 将文件暂存到 GCS 并使用类似于 DataflowRunner 的文件,也许可以使用 ClassLoader 或其他方法?
问问题
184 次
因此,在使用 DataflowRunner 时,我们使用 filesToStage 方法将文件暂存到 GCS,但在 DirectRunner 中不会发生这种情况。有没有办法让 DirectRunner 将文件暂存到 GCS 并使用类似于 DataflowRunner 的文件,也许可以使用 ClassLoader 或其他方法?