spark及HADOOP相关内容

spark框架机制和流程 一．Spark框架 二．Spark基于内存运算框架 三．Spark组件 四．Spark工作机制 和MapReduce相比有两个优点 1、利用多线程来执行具体任务，减少任务的启动开销。 2、同时利用内存和磁盘作为共同的存储设备，有限的减少IO开销。 一、Spark on Standalone(任务提交执行流程) 1.spark集群启动后，Worker向Master注册信息

>>阅读原文<<