spark的架构思考（一）

任何架构都是由需求分析得来，而spark是由怎么样的需求分析而来的呢？web 需求：怎样快速计算大数据 解决方案：将大量的数据分红不少块，让不一样的计算机进行计算，而后再汇总起来，这就是简单的MR计算模型。 可是hadoop的MR计算模型，太单一，并且重度依赖IO， 新的需求：需求又来了，怎样又让它快，又让它计算模型复杂呢？架构 需求分析： 1. 非功能性需求：计算快 什么致使MR 计算模型慢呢：

>>阅读原文<<