Spark应用运行流程

相关基本术语 Application:应用,即用户需要完成的应用程序。一般来说,这部分代码需要用户根据自己的需求来完成。这部分代码主要包括两部分:Driver和Executor。 Driver:顾名思义,驱动者,为Application准备运行环境,驱动并监控Application的运行。 Worker:当SparkContext申请到资源后,就会确定此应用程序在Cluster的哪些节点运行。运行
相关文章
相关标签/搜索