阅读背景:

spark查看stage和tasks信息

来源:互联网 

  spark提供了web-ui接口、外部命令等多种方法监视spark程序的执行状态。利用spark的监视功能,可以方便的查看spark应用程序执行的状态,具体包括:1)stage和tasks列表信息  2)RDD大小和内存使用情况  3)环境信息  4)executors信息。  spark提供了web-ui接口、外部命令等多种方法监视spark程序的执行状态。利用spa




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: