apache-spark - 在 IntelliJ 中调试时无法访问 SparkUI

Question

我是 Spark 编程和使用 IntelliJ IDE 开发 Spark 应用程序的新手。我想要实现的是在 IntelliJ 中继续调试的同时达到 Spark Web UI。但是，我在尝试访问 SparkContext 提供的 URL 时收到“无法访问此站点”错误。

是否可以在 IntelliJ 中同时监控 Spark Web UI 和调试？

提前致谢。

更新

我已经尝试过http://localhost:4040和http://localhost:8088。此外，通过命令行界面启动 spark-shell 时，我可以从http://localhost:4040访问 Spark Web UI。

Answer 1

您可以在端口：8088 上看到您的应用程序，例如：https://hostname:8088