Amazon web services spark sql:如何获取进度条(包含阶段和任务)?

Amazon web services spark sql:如何获取进度条(包含阶段和任务)?,amazon-web-services,apache-spark,apache-spark-sql,yarn,emr,Amazon Web Services,Apache Spark,Apache Spark Sql,Yarn,Emr,如何获取spark sql上的progressbar?spark shell获得一个很好的进度条,如下所示: [第七阶段:==========>(14174+5)/62500] 此progressbar显示分配的执行器总数、正在运行的执行器数量和已完成的执行器数量。进度条的长度表示作业的完成百分比 如果没有这一点,我们只能依靠资源管理器UI并不断刷新。spark sql-S将显示压缩的进度

如何获取spark sql上的progressbar?spark shell获得一个很好的进度条,如下所示: [第七阶段:==========>(14174+5)/62500]

此progressbar显示分配的执行器总数、正在运行的执行器数量和已完成的执行器数量。进度条的长度表示作业的完成百分比


如果没有这一点,我们只能依靠资源管理器UI并不断刷新。spark sql-S将显示压缩的进度