谈下spark和hadoop

Spark及其生态圈概述 1.Spark 产生背景:面对Hadoop中MapReduce框架的局限性和框架的多样化特点,使得spark诞生。Spark的产生源于Matei Zaharia博士的论文------An Architecture for Fast and General Data。 框架的局限性主要由4个方面: 1)代码繁琐(需要自己定义Map类和Reduce类以及在main方法的配置)
相关文章
相关标签/搜索