conda - Metaflow - 从 S3 删除 conda 文件夹后，AWS 批处理任务失败

Question

我在 AWS 上以批处理模式使用Metaflow 。我从 s3 中删除了 conda 文件夹。现在，当我尝试运行批处理任务时，它在引导环境步骤中失败。

显然metaflow.plugins.conda.batch_bootstrap尝试使用cache_urls与 conda.dependencies 文件中的环境 id 关联的环境 id 下载 conda 包。此处更详细地描述了该问题。

如何解决此问题，以便我可以再次运行元流批处理任务？

Answer 1

@kanimbla metaflow.metaflow在与您的流程相同的目录中或在其中一个父目录中维护一个清单文件夹。删除它会重置流程的依赖项。