Spark Storage概述
概述 Spark的Storage模块负责RDD(persist或cache)、Shuffle中间结果、Broadcast变量的存储及管理。 设计 组件 Storage模块抽象出BlockManager，提供公有的putXXX、getXXX方法供其他模块调用而无需关心其实现细节，BlockManager实现涉及的其他主要class如下(按原始数据和元数据管理分) BlockStore 以block为
相关文章
- 1. Spark----Spark SQL概述
- 2. Docker-- Docker storage driver 概述
- 3. Azure Storage系列之概述
- 4. OpenStack Object Storage（Swift）概述
- 5. 【Spark】Spark七： Spark概述
- 6. Spark Streaming-概述
- 7. Spark SQL概述
- 8. Spark Streaming 概述
- 9. Spark概述
- 10. Spark DAG概述
- 更多相关文章...
- • 数据库是什么？数据库的概念 - MySQL教程
- • Docker info 命令 - Docker命令大全
- • Java Agent入门实战（二）-Instrumentation源码概述
- • TiDB 在摩拜单车在线数据业务的应用和实践
相关标签/搜索
每日一句
-
每一个你不满意的现在，都有一个你没有努力的曾经。
最新文章
欢迎关注本站公众号,获取更多信息
