Spark十二 集群运行

1 运行时架构 1) 驱动器节点Driver     驱动器程序的两个功能     > 把用户程序转化为任务         (1) 驱动器程序把用户程序转为多个物理执行单元,称为任务            (2) 程序从输入数据创建一系列RDD,转化操作生成新的RDD,最后执行行动操作         (3) 由操作隐式创建逻辑有向无环图,驱动器运行时把DAG转为物理执行计划         (
相关文章
相关标签/搜索