Spark流程的内部实现

Spark流程的内部实现 1 Spark核心组件回顾 1.1 Driver Spark驱动器节点,用于执行Spark任务中的main方法,负责实际代码的执行工作。Driver在Spark作业执行时主要负责: 将用户程序转化为job 在executor中间进行调度任务(task) 跟踪executor的执行情况 通过UI展示查询运行情况 1.2 Executor Executor实际上是一个JVM进
相关文章
相关标签/搜索