spark 组成及运行大概 流程

spark 组成及运行大概  流程  Driver:运行应用的的main函数,提交任务,下发计算任务。 ClusterManager:资源管理,在独立的模式(standalone)模式下是master ,在yarn是ResouceManager Work:计算工作节点,上报自己的资源情况,启动和管理Executer Executor:执行器,是某个应用运行在work节点上的一个进程,负责执行tas
相关文章
相关标签/搜索