Giraph源码分析（二）—启动Master/Worker服务

做者 | 白松

注：本文为原创，引用转载需与数澜联系。

一、org.apache.giraph.bsp.CentralizedService 接口

功能：Basic service interface shared by both CentralizedServiceMaster and CentralizedServiceWorker.

二、org.apache.giraph.bsp.CentralizedServiceMaster接口

功能：At most, there will be one active master at a time, but many threads can be trying to be the active master.

三、org.apache.giraph.bsp.CentralizedServiceWorker接口

功能：All workers should have access to this centralized service to execute the following methods.

四、org.apache.giraph.bsp.BspService抽象类

**功能：**Zookeeper-based implementation of CentralizedService.

五、org.apache.giraph.master.BspServiceMaster类

功能：ZooKeeper-based implementation of CentralizedServiceMaster.

六、org.apache.giraph.worker.BspServiceWorker类

功能：ZooKeeper-based implementation of CentralizedServiceWorker.

BspServiceWorker类有WorkerClient和WorkerServer实例，分别做为IPC通讯的客户端和服务器端，经过Netty来发送数据。WorkerClient实例实际为NettyWorkerClient对象，WorkerServert实例实际为NettyWorkerServer对象。

NettyWorkerClient implements WorkerClient接口，NettyWorkerServer implements WorkerServer接口。

NettyWorkerServer类的构造方法中建立一个NettyServer对象，用于底层的IPC的通讯，还有一个ServerData对象，做为数据实体。ServerData中包含该Worker的partitionStore、edgeStore、incomingMessageStore、currentMessageStore、汇集值等。

NettyWorkerClient类的构造方法中建立一个NettyClient对象，用于底层的IPC的通讯，做为客户端。

七、org.apache.giraph.worker.InputSplitsCallable 抽象类，继承 Callable接口。

功能：用于加载顶点或边 输入splits，每一个线程都有一个WorkerClientRequestProcessor实例（实为 NettyWorkerClientRequestProcessor对象），负责向远端的worker发送数据。

NettyWorkerClientRequestProcessor对象用于发送的WorkerClient对象就是BspServiceWorker里面的WorkerClient对象。

VertexInputSplitsCallable类中的readInputSplit()方法用来从split中读取顶点的信息，而后调用NettyWorkerClientRequestProcessor对象的sendVertexRequest()方法把顶点发送到它所属的Partition上。

八、org.apache.giraph.graph.ComputeCallable 类，继承Callable接口。

在该对象中完成“计算-通讯-同步”的过程。每一个线程都有一个WorkerClientRequestProcessor实例（实为 NettyWorkerClientRequestProcessor对象），负责向远端的worker发送数据。