Spark与Hadoop MR兄弟两的不同

在大数据相关的面试中,经常会遇到了一个经典的问题:请说说Spark与Hadoop MR的异同? 虽然你有可能过关了,但是由于现场发挥的原因,看了这篇文章你还可以答得更好,就在这里总结一下这个问题。 首先Spark是借鉴了mapreduce并在其基础上发展起来的,继承了其分布式计算的优点并改进了mapreduce 明显的缺陷,但是二者也有不少的差异具体如下: 1、spark把运算的中间数据存放在内存
相关文章
相关标签/搜索