spark学习笔记（一）

一、spark是什么 扩展了mapreduce的计算模型，高效的支持多种计算模型。 Spark Core 实现了Spark 的基本功能，包含任务调度、内存管理、错误恢复、与存储系统交互等模块。 Spark SQL 是Spark 用来操作结构化数据的程序包。使用hive sql，支持多种数据格式。 Spark 提供的对实时数据进行流式计算的组件。本质是微批处理 Spark 提供的包含常见机器学习（M

>>阅读原文<<