spark core 非实时计算滑动窗口

      滑动窗口在数据分析中占据这很是重要的位置,经过spark streaming很容易能够实现滑动窗口的计算,可是在spark core上并行计算却很难实现滑动窗口的操做。即便作出来也是很是不方便。滑动窗口的实现和上一篇文章计算前n项和的编程相似,须要两次遍历数据。
相关文章
相关标签/搜索