在Databricks笔记本中可视化查询计划的能力发生了什么?

问题描述 投票:0回答:1

[在Youtube上有一个古老的演讲(2014年),演讲者在Databricks笔记本中直观地查看了一个查询计划。这是屏幕截图:

enter image description here

我正在使用databricks运行时5.5 LTS ML,并且每当我尝试在查询计划上调用viz时,都会出现这种错误:

error: value viz is not a member of org.apache.spark.sql.catalyst.plans.logical.LogicalPlan

Spark 2.0+中是否已弃用此功能,或者我需要安装/导入其他库才能获得此功能?

apache-spark apache-spark-sql databricks catalyst-optimizer
1个回答
0
投票

我不认为它已经有了可视化,但是它们确实解释了SQL查询,我认为这就是您想要的。

spark.sql("your SQL query").explain(true)

yourDataframe.explain(true)
© www.soinside.com 2019 - 2024. All rights reserved.