目前我们在 Azure HDInsight 集群（版本：HDI 3.6）中使用 ML pyspark 作业。是否可以在 Azure Databricks 中使用相同的 pyspark 作业而不进行太多更改？
提前致谢！
问问题
44 次
1 回答
0
我会说是的，但要考虑以下几点：
- 确保 HDInsight 群集的 Python 和 Spark 版本与为群集选择的Databricks 运行时相似或兼容。
- 您是否使用任何外部库？如果是这样，请将其导入您的工作区并将其附加到集群。
- 您的工作使用哪个数据源？您可能必须将数据源安装到数据块工作区中，例如安装 blob 存储 ( https://docs.databricks.com/spark/latest/data-sources/azure/azure-storage.html#mount-azure -blob-storage-containers-with-dbfs )
我希望这些信息对你有帮助
问候，
胡安
于 2019-02-23T00:41:18.040 回答