【Spark】Spark 存储原理--读数据过程

本篇结构: 读取数据块过程 内存读取 磁盘读取 远程读取 一、读取数据块过程 BlockManager 的 get 方法是读数据的入口点,有本地读取和远程读取两个分叉口。本地读取使用 getLocalValues 方法,根据存储级别的不同,使用 MemoryStore.getValues 或者 DiskStore.getBytes 读取数据。 远程读取使用 getRemoteValues 方法,调
相关文章
相关标签/搜索