Spark job 的执行流程简介

咱们能够发现,Spark 应用程序在提交执行后,控制台会打印不少日志信息,这些信息看起来是杂乱无章的,可是却在必定程度上体现了一个被提交的 Spark job 在集群中是如何被调度执行的,那么在这一节,将会向你们介绍一个典型的 Spark job 是如何被调度执行的。spa 咱们先来了解如下几个概念:日志 DAG: 即 Directed Acyclic Graph,有向无环图,这是一个图论中的概念
相关文章
相关标签/搜索