spark中资源调度的源码分析【图片】

  Spark资源调度:app 1.启动集群,worker向master汇报资源,master掌握了集群资源spa 2.提交application时,会建立Driver,当new SparkContext时,会建立两个对象DAGScheduler和TaskScheduler对象 3.TaskScheduler向master申请资源blog 4.MAster找到知足资源的worker,启动execu
相关文章
相关标签/搜索