RDD用法与实例(十一)Spark中master、worker、executor和driver的关系,通过broadcast形成共享和直接生成全局变量的区别

Spark中master、worker、executor和driver的关系 参考来源1 master是大哥,worker是工人小弟们。master大哥有一个副手老二叫driver,手上管着一批货物executor(memory cpu等资源),老二会问大哥咋分给小弟们呢,大哥说哎,就这么分,张三比较菜(worker)搬两箱(executor),李四能者多劳(worker)搬五箱(executor
相关文章
相关标签/搜索