【spark八十七】给定Driver Program, 如何判断哪些代码在Driver运行,哪些代码在Worker上执行...

Driver Program是用户编写的提交给Spark集群执行的application,它包含两部分java 做为驱动: Driver与Master、Worker协做完成application进程的启动、DAG划分、计算任务封装、计算任务分发到各个计算节点(Worker)、计算资源的分配等。 计算逻辑自己,当计算任务在Worker执行时,执行计算逻辑完成application的计算任务 接下来的
相关文章
相关标签/搜索