Spark学习之路——5.Spark UI

一、Spark UI解读 Jobs页面可以看到所有Jobs的执行情况,job的数量取决于action算子的数量。 Stages页面列出所有Stage的执行情况。Spark stage切分是按照宽依赖来区分的,因此粒度上要比job更细一些。 Storage页面显示所做的cache persist等操作。 Environment页面里面展示了当前spark所依赖的环境,比如jdk,lib等等 Exec
相关文章
相关标签/搜索