spark 启动消息通信基本过程源码阅读(一)

spark 启动消息通信基本过程 spark启动过程主要是进程maste和worker之间的通信: 1、worker节点向master节点发送注册消息 2、注册成功后,返回注册成功消息或者失败消息。 3、worker定时发送心跳给master。 具体流程图如下所示:   1、 a)、当master启动后,随之启动各worker,worker启动时会创建通信环境RpcEnv和终端点Endpoint,
相关文章
相关标签/搜索