Spark中常见方法的使用

Spark中常见方法的使用 1.reduceByKey() 在scala中,reduce表示进行某种操做,可是具体是何种操做,须要使用本身传递的函数做为参数。 可是这里的reduceByKey()则是将具备相同键的value合并,而后造成一个map,示例代码以下:web scala> val book = Array(("spark",2),("hadoop",6),("hadoop",4),("
相关文章
相关标签/搜索