Spark学习总结(一)

RDD及其特色 一、RDD是Spark的核心数据模型,可是个抽象类,全称为Resillient Distributed Dataset,即弹性分布式数据集。java 二、RDD在抽象上来讲是一种元素集合,包含了数据。它是被分区的,分为多个分区,每一个分区分布在集群中的不一样节点上,从而让RDD中的数据能够被并行操做。(分布式数据集)算法 三、RDD一般经过Hadoop上的文件,即HDFS文件或者H
相关文章
相关标签/搜索