spark cache

一.cache 缓存的一些说明: 后进行cache前提: .要求的计算速度快, .集群的资源要足够大 .重要:cache的数据会多次的触发Action,这个时候需要缓存,没这个前提用一次没必要缓存 .先进行过滤,然后将缩小范围的数据在cache到内存,过滤拿掉一部分数据。 cache 底层调的方法 底层调用的是persist(),这个方法很灵活,里面可以传参数] unpersist(true) 释
相关文章
相关标签/搜索