Spark程序运行架构

1.Driver Application : Spark运行程序。 2.Cluster Manager:集群管理器。 3.Worker:工作节点。 4.Executor:执行器。 5.Task:任务。 注意:在Spark2.0之前版本,应用程序的入口为SparkContext,SqlContext和HiveContext,     在Spark2.0之后统一使用SparkSession !
相关文章
相关标签/搜索