一分钟教你看懂 Spark的体系架构

1、Spark集群的体系结构 官方的一张图:       组件 Spark应用程序在群集上作为独立的进程集运行,由SparkContext 主程序中的对象(称为驱动程序)协调。 具体来说,要在集群上运行,SparkContext可以连接到几种类型的集群管理器 (Spark自己的独立集群管理器Mesos或YARN),它们可以在应用程序之间分配资源。连接后,Spark会在集群中的节点上获取执行程序,这
相关文章
相关标签/搜索