问题标签 [aws-databricks]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
1 回答
18 浏览

cluster-computing - 集群在缺乏使用后自动从 Databricks 中删除

有谁知道如何检索在一段时间不使用后从 Databricks 中自动删除的集群?我向它添加了一堆库和全局初始化脚本,一个月不使用它后它就自动被删除了。我想看看我上次做了什么来检索它或复制它。

0 投票
1 回答
12 浏览

databricks - 将数据加载到 Synapse 时出现 Databricks 错误:java.lang.IllegalArgumentException:列号不匹配

Databricks 到 Synapse 数据加载错误:

0 投票
1 回答
25 浏览

amazon-s3 - Pyspark 使用自定义名称将 DataFrame 写入 S3 中的 csv 文件

我正在使用如下代码将文件写入 S3 存储桶:

这会根据需要作为多个文件输出到 S3 存储桶,但每个部分都有一个长文件名,例如:

部分-00019-tid-5505901395380134908-d8fa632e-bae4-4c7b-9f29-c34e9a344680-236-1-c000.csv

有没有办法将其写为自定义文件名,最好是在 PySpark 写入函数中?如:

部分 00019-my-output.csv

0 投票
0 回答
23 浏览

python - 无法在数据块上创建特征表

尝试创建特征表时出现以下错误 -

注意 - 我使用的是 databricks 社区版。