transformation和action的介绍

Spark支持两种RDD操做: transformation和action。 区别: transformation操做会针对已有的RDD建立一个新的RDD;而action则主要是对RDD进行最后的操做,好比遍历、reduce、保存到文件等,并能够返回结果给Driver程序。 例如,map就是一种transformation操做,它用于将已有RDD的每一个元素传入一个自定义的函数,并获取一个新的元素
相关文章
相关标签/搜索