Spark 中的Tungsten和Catalyst

spark内核的三大核心：基于RDD的调度系统、Tungsten和Catalyst解析优化引擎web Tungsten Tungsten面对： Memory , CPU, Disk IO 和 NetWork IOsql spark 1.6是第一阶段面对Memory， spark 2.0的时候面对的是CPU编程 磁盘IO和网络IO主要发生在Shuffle阶段，Shuffle有Hash, Sort,

>>阅读原文<<