Spark-RDD详解

什么是RDD? 弹性分布式数据集分布在不一样集群节点的内存中 能够理解成一大数组 数组的每一元素是RDD的一分区 RDD的每一分区是一数据块 一个RDD能够分布并被运算在多台计算机节点的内存及硬盘中 RDD表明了一系列数据集合分布在机群的内存中。SPARK CORE 的任务是对这些数据进行分布式计算。php RDD特性 RDD数据块能够放在磁盘上也可放在内存中(取决于设置) 如出现缓存失效或丢失，

>>阅读原文<<