2.spark的RDD特性(Resillient Distributed Dataset)

1、RDD是Spark提供的核心抽象,全称为Resillient DistributedDataset,即弹性分布式数据集。 2、RDD在抽象上来说是一种元素集合,包含了数据。它是被分区的,分为多个分区,每个分区分布在集群中的不同节点上,从而让RDD中的数据可以被并行操作。(分布式数据集) 3、RDD通常通过Hadoop上的文件,即HDFS文件或者Hive表,来进行创建;有时也可以通过应用程序中的
相关文章
相关标签/搜索