问题标签 [aws-databricks]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
cluster-computing - 集群在缺乏使用后自动从 Databricks 中删除
有谁知道如何检索在一段时间不使用后从 Databricks 中自动删除的集群?我向它添加了一堆库和全局初始化脚本,一个月不使用它后它就自动被删除了。我想看看我上次做了什么来检索它或复制它。
databricks - 将数据加载到 Synapse 时出现 Databricks 错误:java.lang.IllegalArgumentException:列号不匹配
Databricks 到 Synapse 数据加载错误:
amazon-s3 - Pyspark 使用自定义名称将 DataFrame 写入 S3 中的 csv 文件
我正在使用如下代码将文件写入 S3 存储桶:
这会根据需要作为多个文件输出到 S3 存储桶,但每个部分都有一个长文件名,例如:
部分-00019-tid-5505901395380134908-d8fa632e-bae4-4c7b-9f29-c34e9a344680-236-1-c000.csv
有没有办法将其写为自定义文件名,最好是在 PySpark 写入函数中?如:
部分 00019-my-output.csv
python - 无法在数据块上创建特征表
尝试创建特征表时出现以下错误 -
注意 - 我使用的是 databricks 社区版。