spark原理:概念与架构、工做机制

1、Hadoop、Spark、Storm三大框架比较java Hadoop:离线海量数据批处理,基于磁盘的python Spark:基于内存。算法 Spark特色:运行速度快,使用DAG执行引擎以支持循环数据流与内存计算,shell 二、容易使用:多种语言编程,经过spark shell进行交互式编程编程 三、通用性:提供了完整而强大的技术栈,包括sQL查询、流式计算、机器学习和图算法组件多线程
相关文章
相关标签/搜索