spark的工作流程

1.通过"spark-submit"脚本将代码提交到集群中运行。 2.在初始化sparkContext上下文时,spark会创建"DAGScheduler""TeskScheduler"两个对象。 3.创建好这两个对象后,客户端(Driver)会向Master节点发送一个Application任务。 4.Master在接受到Application任务后,会进行资源调度。 5.Master会找到对应
相关文章
相关标签/搜索