spark的架构

spark架构采用了分布式计算中的master-slave模型,master是对应集群中含有master进程的节点,slave是集群中含有worker进程的节点,master做为整个集群的控制器,负责整个集群的正常运行,worker至关因而计算节点,接受主节点命令与进行状态汇报。node Executor负责任务的执行,client做为用户的客户端负责提交应用,driver负责控制一个应用的执行 
相关文章
相关标签/搜索