apache-spark - 在 Databricks 笔记本中可视化查询计划的能力发生了什么变化？

Question

Youtube上有一个旧的（2014 年）演讲，演讲者在 Databricks 笔记本中可视化了一个查询计划。这是屏幕截图：

我正在使用 databricks 运行时 5.5 LTS ML，每当我尝试调用viz查询计划时，都会出现这种错误：

error: value viz is not a member of org.apache.spark.sql.catalyst.plans.logical.LogicalPlan

Spark 2.0+ 中是否已弃用此功能，或者我是否需要安装/导入其他库才能获得此功能？

Answer 1

我认为不再有它的可视化，但他们确实解释了 SQL 查询，我认为这就是您正在寻找的。

spark.sql("your SQL query").explain(true)

或者

yourDataframe.explain(true)