RDD之collect方法执行的过程

首先来看一张图： spark集群中有master节点和Worker节点，master节点负责任务调度，worker节点负责计算。 当集群启动时，worker节点会向master注册，并且定期向master发送心跳。 当我们向集群提交任务时，会启动一个进程spark-submit,这个进程也叫做driver。这个进程先要连接master，然后master会通过注册信息找到合适的worker节点去计算

>>阅读原文<<