spark工作节点之Worker原理剖析

       这节我们讲讲Worker,Worker 计算资源的实际贡献者,他要向Master汇报自身拥有多少cpu core和memory, 在master的指示下负责启动executor,executor 是执行真正计算的苦力,由master来决定该进程拥有的core和memory数值,Master  掌管整个cluster的资源,主要是指cpu core和memory,但Master自身并不
相关文章
相关标签/搜索