spark工做机制

spark 这里以wordcount程序为例,演示spark的基本流程和原理web 基本概念 RDD:弹性分布式数据集。数据存放在各个节点上。spark对RDD进行操做。 算子:各类操做/行动。spark中的函数 建立 变换 缓存 行动 spark架构分析 application:用户编写的spakr程序,包含驱动程序和要运行的代码 driver驱动程序:main建立sparkcontent,程序
相关文章
相关标签/搜索