大数据开发中Spark架构运行详解及其优势详解?

一、Spark基本概念 spark是一种分布式的计算框架。类似于大数据开发中Hadoop生态圈的MapReduce,计算思想和MR非常相似,两者都是分而治之的思想,但使用率要比MR高很多。 在学习Spark运行架构之前,我们有必须要先了解Spark中几个基本概念。 1、Application(应用程序):是指我们编写的Spark应用程序,包含驱动程序(Driver)和分布在及群众多个节点上运行的E
相关文章
相关标签/搜索