spark从入门到放弃六: RDD 持久化原理

文章地址:http://www.haha174.top/article/details/252484 spark 中一个很是重要的功能特性就是能够将RDD 持久化到内存中。当对RDD进行持久化操做时,每一个节点都会将本身操做的RDD的partition持久化到内存中,而且以后对该RDD的反复使用直接使用内存缓存的partion.这样的话针对一个RDD反复执行多个操做的场景就只要对RDD计算一次便可
相关文章
相关标签/搜索