Spark 内核概述

1.Spark核心组件回顾 1.1 Driver Spark驱动器节点,用于执行Spark任务中的main方法,负责实际代码的执行工作。Driver在Spark作业执行时主要负责: 将用户程序转化为作业(job); 在Executor之间调度任务(task); 跟踪Executor的执行情况; 通过UI展示查询运行情况;   1.2 Executor Spark Executor节点是一个JVM进
相关文章
相关标签/搜索