spark运行原理简单介绍和一些总结

1·,运行原理 看个流程图: 解说就是: 1,构建spark Application运行环境 2,sparkcontext向资源管理器注册 3,sparkContext向资源管理器申请运行Executor(执行器) 4,资源管理器分配executor 5,资源管理器启动executor 6,executor发送心跳至资源管理器 7,sparkContext构建DAG图 8,将DAG图分解成stag
相关文章
相关标签/搜索