spark概述与编程模型

spark快的原因 1.内存计算 2.DAG spark shell已经初始化好了SparkContext，直接用sc调用即可 lineage 血统 RDD wide and narrow dependencies 窄依赖每个 RDD partition最多被一个子RDD partirion依赖 /sbin（system binary)放的都是涉及系统管理的命令。 有些系统里面，普通用户没有执行这

>>阅读原文<<