spark学习-69-源代码:Endpoint模型介绍(1)

Spark作为分布式计算框架,多个节点的设计与相互通信模式是其重要的组成部分 一、组件概览 对源码分析,对于设计思路理解如下: RpcEndpoint:RPC端点 ,Spark针对于每个节点(Client/Master/Worker)都称之一个Rpc端点 ,且都实现RpcEndpoint接口,内部根据不同端点的需求,设计不同的消息和不同的业务处理,如果需要发送(询问)则调用Dispatcher R
相关文章
相关标签/搜索