Spark简介与功能

Spark是基于内存计算的大数据分布式计算框架。Spark基于内存计算,提升了在大数据环境下数据处理的实时性,同时保证了高容错性和高可伸缩性,容许用户将Spark部署在大量廉价硬件之上,造成集群。缓存 1.提供分布式计算功能,将分布式存储的数据读入,同时将任务分发到各个节点进行计算;框架 2.基于内存计算,将磁盘数据读入内存,将计算的中间结果保存在内存,这样能够很好的进行迭代运算;机器学习 3.支
相关文章
相关标签/搜索