Spark学习笔记 --- 架构原理和工作原理和执行流程

一、架构原理和工作原理     Driver: 一个进程,我们编写Spark程序运行在Driver上,由Driver进行执行,Driver是作业的主进程,具有Main函数,是程序的入口点,Driver进程启动后,向Master发送请求,进行注册,申请资源,在后面的Executor启动后,会向Driver进行反向注册,Driver注册Executor后,正式执行Spark程序,读取数据源,创建RDD
相关文章
相关标签/搜索