CacheManager原理剖析

前景:Task ——》 RDD(iterator方法) ——》计算当前Task要计算出来的那个partition 情景1: 该RDD是持久化过的:那么StorageLevel肯定不是NONE,则会使用CacheManager去帮助我们直接读取持久化过的数据     情景1.1:BlockManager,先尝试从本地读取(getLocal),或从远程获取(getRemote)     情景1.2:因
相关文章
相关标签/搜索