apache-spark - 火花驱动程序进程是否溢出到磁盘？

Question

在 spark thrift 服务器中运行大型 sql 查询时出现 OOM 错误。想知道 Spark Master 是否能够将数据溢出到磁盘上。

有没有办法将 spark sql 结果流式传输回 jupyter notebook。