0

我正在运行以下任务以使用 Azure DevOps 发布管道将 Notebook 上传到 Databricks:

databricks workspace mkdirs //build

databricks workspace import --language PYTHON --format SOURCE
--overwrite _databricks/notebook/$(notebook_name)-$(Build.SourceVersion).py //build/$(notebook_name)-$(Build.SourceVersion).py

但收到错误:路径(//build/helloworld-04747aa082426141c5c286fbe5eab2d7d1bd5983.py)包含空名称

2020-05-16T18:54:01.5665867Z ##[section]Starting: Upload Notebook to Databricks
2020-05-16T18:54:01.5831890Z ==============================================================================
2020-05-16T18:54:01.5832257Z Task         : Bash
2020-05-16T18:54:01.5832539Z Description  : Run a Bash script on macOS, Linux, or Windows
2020-05-16T18:54:01.5832833Z Version      : 3.163.2
2020-05-16T18:54:01.5833073Z Author       : Microsoft Corporation
2020-05-16T18:54:01.5833436Z Help         : https://docs.microsoft.com/azure/devops/pipelines/tasks/utility/bash
2020-05-16T18:54:01.5833824Z ==============================================================================
2020-05-16T18:54:01.8378449Z Generating script.
2020-05-16T18:54:01.8525502Z [command]"C:\Program Files\Git\bin\bash.exe" --noprofile --norc -c pwd
2020-05-16T18:54:01.8915864Z /d/a/_temp
2020-05-16T18:54:01.8975224Z 
2020-05-16T18:54:01.9001870Z ========================== Starting Command Output ===========================
2020-05-16T18:54:01.9009310Z [command]"C:\Program Files\Git\bin\bash.exe" --noprofile --norc /d/a/_temp/5c6b246a-d6b4-45f3-9c35-c1f64320d54b.sh
2020-05-16T18:54:09.0829994Z **Error: b'{"error_code":"INVALID_PARAMETER_VALUE","message":"Path (//build/helloworld-04747aa082426141c5c286fbe5eab2d7d1bd5983.py) contains empty name"}'**
2020-05-16T18:54:09.1242892Z 
2020-05-16T18:54:09.1369153Z ##[error]Bash exited with code '1'.
2020-05-16T18:54:09.1385662Z ##[section]Finishing: Upload Notebook to Databricks

令人惊讶的是,相同的代码运行良好,对其他人来说没有任何错误。

谷歌搜索没有找到任何东西。任何想法/线索/建议?谢谢

4

2 回答 2

1

由于指定的路径不正确,即 ( //build),您会遇到此错误消息。确保您传递了正确的路径,即 ( /build)。

在此处输入图像描述

我建议您更正使用 Azure DevOps 发布管道将 Notebook 上传到 Databricks 的任务,如下所示:

databricks workspace mkdirs /build
databricks workspace import --language PYTHON --format SOURCE --overwrite _databricks-example/notebook/$(notebook_name)-$(Build.SourceVersion).py /build/$(notebook_name)-$(Build.SourceVersion).py
于 2020-05-20T09:32:03.707 回答
0

我遇到过类似的问题,如-:https ://forums.databricks.com/questions/39420/path-contains-empty-name.html

这是因为您可能正在使用 Windows 托管代理。这可以通过将代理更改为使用 ubuntu 来解决。我使用了 ubuntu 1604 (ubuntu-16.04)。请使用下面提到的路径(无需在前面添加“/”)

databricks 工作区 mkdirs /build databricks 工作区导入 --language PYTHON --format SOURCE --overwrite _databricks-example/notebook/$(notebook_name)-$(Build.SourceVersion).py /build/$(notebook_name)-$(Build.源版本).py

我希望这可以帮助您解决它。干杯!

ADO 管道中使用的代理的快照

于 2021-03-16T07:57:45.163 回答