Spark 中 map 与 flatMap 的比较

通过一个实验来看Spark 中 map 与 flatMap 的区别。   步骤一:将测试数据放到hdfs上面 hadoopdfs -put data1/test1.txt /tmp/test1.txt 该测试数据有两行文本:   步骤二:在Spark中创建一个RDD来读取hdfs文件/tmp/test1.txt   步骤三:查看map函数的返回值 得到map函数返回的RDD:  查看map函数的返
相关文章
相关标签/搜索