azure - 在 HDInsight 群集中为启用安全的存储帐户提交 Spark 作业

Question

当我们尝试在 HDInsight 3.6 中使用 ADF 或 Livy 提交 Spark 作业时，具有安全传输功能的 Spark 2.1需要在关联的存储帐户中“启用” 。它没有提交 Spark 作业，我们无法在 YARN UI 中看到 Spark 作业，但是如果我们禁用 关联存储帐户中所需的此安全传输，我们可以提交相同的方式。

如果需要安全传输在存储帐户中为“启用” ，请告诉我们如何提交 Spark 作业。

Answer 1

我得到了这个问题的解决方案。在创建 HDinsight 集群之前，请准备好以下几点。**

1 Create azure storage account and create container where you want to put your jar or Spark related code.
2 While Configuring HDInsight cluster you use the above created storage account and container.

**

谢谢， 苏迪普