Spark Worker源码追踪和分析

Worker原理 driver 原理 每一个Driver都会被封装成DriverRunner。在DriverRunner中,主要做的事情,就是在worker上面创建driver的工作目录,然后拉取jar包到本地将这些信息封装好了后使用buildProcess打包发送给driver进行运行,这里只需要知道driver是被java进程调度即可。 源码 1、启动driver,主要是将配置信息封装到dri
相关文章
相关标签/搜索