Spark架构原理

转载文章地址 前言 本文总结了Spark架构原理,其中主要包括五个组件:Driver、Master、Worker、Executor和Task,简要概括了每个组件是干啥的,并总结提交spark程序之后,这五个组件运行的详细步骤。 1、流程图 为了直观,就把流程图放在最前面了 2、Driver driver是一个进程,我们编写的spark程序运行在driver上,由dirver进程执行,driver是
相关文章
相关标签/搜索