azure-databricks - Databricks 笔记本集成了 mlflow 工件位置和保留

Question

1. 目前默认情况下，在笔记本运行中，它将创建一个实验 ID，但工件位置将指向 dbfs:/databricks/mlflow/{experiment id} 下的某个内容。如果有办法我们可以在默认实验创建中更改它？我们喜欢管理数据块外部的存储。

2. 试验运行和指标的默认 TTL 有多长？它是可配置的吗？如何配置？

Answer 1

您可以使用mlflow_set_experiment('<PATH>')来指定您希望在何处记录您的运行及其所有内容。请参阅此处的文档。

如果您正在使用 Databricks 并希望记录到特定的 blob 存储，您可以将 blob 存储挂载到 Databricks 文件系统 (DBFS)，并在设置实验时将 MLflow 指向它。

如果您正在谈论在 Databricks 中运行它并直接在本地记录结果，我认为您不能这样做。但是，您可以使用 GitHub 和MLflow 项目在 Databricks 上进行开发，然后在本地运行，反之亦然。