基于standalone的Spark架构与工作原理理解

standalone模式下的模块架构 Client 客户端进程,负责提交作业到Maste Client就是我们的客户端,例如我们在windows上通过eclipse编写Scala程序向Spark提交作业,那么我们的Client就是eclipse Master Standalone模式中主节点,负责接收Client提交的作业,管理Worker,并命令Worker启动Driver和Executor。
相关文章
相关标签/搜索