spark学习笔记之spark技术框架

Spark的核心 Spark的运行框架: -SparkContext驱动程序 -ClusterManager集群资源管理器 -Executor任务执行进程 Spark Context 是驱动程序,它是spark的根本。SparkContext提交作业,并请求分配资源,Cluster Manager(集群资源管理器)会根据当前集群的使用情况,根据先进先出的原则分配给worker,先分配的应用程序会分
相关文章
相关标签/搜索