BlockManager原理和源码解密(简约版)

一、BlockManager运行实例观察 从Application启动的角度来观察BlockManager; 1,在Application启动时会在SparkEnv中注册BlockManagerMaster以及MapOutputTracker,其中 a) BlockManagerMaster:对整个集群的Block数据进行管理的; b) MapOutputTracker:跟踪所有mapper的输出
相关文章
相关标签/搜索