Spark运行架构特点

1.1.1.Executor进程专属 每个Application获取专属的executor进程,该进程在Application期间一直驻留,并以多线程方式运行tasks。 Spark Application不能跨应用程序共享数据,除非将数据写入到外部存储系统。 如图所示:     1.1.2. 支持多种资源管理器 Spark与资源管理器无关,只要能够获取executor进程,并能保持相互通信就可以
相关文章
相关标签/搜索