3

假设一个在集群模式下运行的 Spark 作业在集群模式下启动了 3 个 executor,那么如何获取 spark 集群中每个 executor 进程的进程 ID(PID)。在 pyspark 中是否有任何 api ?

编辑:问题是关于执行程序 jvm 进程 ID(PID)而不是执行程序 ID。那么如何使用 pyspark API 获取执行程序进程 ID。?

4

0 回答 0