Spark学习笔记(一)--Spark架构

Spark架构采用了分布式计算中的Master-Slave模型。Master是对应集群中的含有Master进程的节点,Slave是集群中含有Worker进程的节点。Master做为整个集群的控制器,负责整个集群的正常运行;Worker至关因而计算节点,接收主节点命令与进行状态汇报;Executor负责任务的执行;Cluster做为用户的客户端负责提交应用,Driver负责控制一个应用的执行。具体以
相关文章
相关标签/搜索