0

我在循环中创建了临时视图。此临时视图用于后续查询。

for row in manual_est_query_results_list:
    manual_est_query_results.createOrReplaceTempView("manual_estimates")

有时,manual_est_query_results_list列表的大小约为 500 行,导致 Spark UI、SQL 选项卡中的 500 行,如下所示。执行时间以毫秒为单位,但这会使 UI 变得混乱,从而在调试问题时难以导航。如果要移出循环应该注意什么

在此处输入图像描述

4

0 回答 0