spark基础
spark可类比于hadoop的MapReduce，性能上有更多优化，一个主要的特点就是spark是基于内存运算的，相比于MapReduce的基于磁盘，减少了IO开销，运算速度快；另一个优化是spark提供基于DAG的运算，防止数据反复落地；同时spark提供多种计算模式，满足不同需求 spark 生态系统 下图展示了spark生态系统的主要模块： Mesos,hadoop YARN:底层资源调度
相关文章
- 1. spark基础-001
- 2. spark-sql基础
- 3. Spark基础 DAG
- 4. Spark core基础
- 5. spark 基础 下
- 6. Spark基础
- 7. spark streaming基础
- 8. spark 基础
- 9. spark基础
- 10. spark 基础 上
- 更多相关文章...
- • Kotlin 基础语法 - Kotlin 教程
- • Scala 基础语法 - Scala教程
- • Kotlin学习（二）基本类型
- • ☆基于Java Instrument的Agent实现
相关标签/搜索
每日一句
-
每一个你不满意的现在，都有一个你没有努力的曾经。
最新文章
欢迎关注本站公众号,获取更多信息
相关文章
- 1. spark基础-001
- 2. spark-sql基础
- 3. Spark基础 DAG
- 4. Spark core基础
- 5. spark 基础 下
- 6. Spark基础
- 7. spark streaming基础
- 8. spark 基础
- 9. spark基础
- 10. spark 基础 上