spark中建立RDD的方式

spark中建立RDD的几种方式: 一、使用程序中的集合建立RDD(通常用于测试)apache 二、使用本地文件系统建立RDD(通常用于数据量大的文件的测试)oop 三、基于HDFS建立RDD(生产环境最经常使用的RDD建立方式)测试 四、使用s3建立RDDspa 五、基于数据流建立RDDscala package com.dt.spark import org.apache.spark.{Sp
相关文章
相关标签/搜索