spark比MapReduce快的缘由

park比MapReduce快的缘由数组 Spark是基于内存的,而MapReduce是基于磁盘的迭代函数 MapReduce的设设计:中间结果保存在文件中,提升了可靠性,减小了内存占用。可是牺牲了性能。 Spark的设计:数据在内存中进行交换,要快一些,可是内存这个东西,可靠性不如磁盘。因此性能方面比MapReduce要好。 DAG计算模型在迭代计算上仍是比MapReduce的效率更高性能 有向
相关文章
相关标签/搜索