Spark总结
0. Spark 转为大规模数据处理设计的快速通用的计算引擎 基于内存,开源,并行计算 消除了mapreduce大量IO操做和仅支持批处理的缺陷 经过RDD弹性分布式数据集,提供交互式查询功能 基于scala面向函数语言编写,便于操做RDD 可经过YARN管理分配资源,利用HDFS存储数据 使用DAG有向无环图执行引擎,内存/磁盘计算速度均比MR快 支持java,python,scala,R和sp
相关文章
- 1. Spark Streaming 总结
- 2. Spark-Streaming总结
- 3. Spark 总结 一
- 4. Spark总结（SparkSQL）
- 5. spark shuffle总结
- 6. spark总结
- 7. hadoop spark 总结
- 8. Spark SQL总结
- 9. Spark总结（二）
- 10. Spark总结02
- 更多相关文章...
- • Docker 资源汇总 - Docker教程
- • XML 总结 下一步学习什么呢？ - XML 教程
- • 算法总结-双指针
- • 算法总结-回溯法
相关标签/搜索
每日一句
-
每一个你不满意的现在，都有一个你没有努力的曾经。
欢迎关注本站公众号,获取更多信息
相关文章
- 1. Spark Streaming 总结
- 2. Spark-Streaming总结
- 3. Spark 总结 一
- 4. Spark总结（SparkSQL）
- 5. spark shuffle总结
- 6. spark总结
- 7. hadoop spark 总结
- 8. Spark SQL总结
- 9. Spark总结（二）
- 10. Spark总结02