azure - Azure Batch Job 如何将大文件拆分为小文件

Question

想要使用 Azure Batch Job 处理大文件，但无法弄清楚我将如何以及在何处将我的大文件拆分为较小的文件，以及如何将其传递给 Task，以便相同的文件不会传递给 Task 的任何其他实例

Answer 1

您可以使用JobManager 任务来完成此操作。JobManager 任务可以拆分大文件，将较小的文件上传回 Azure 存储，并让 JobManager 任务启动处理这些较小文件的任务。