大数据技术总结
本文用来记录大数据的各项技术，用做技术提纲前端 1、数据接入 kafka 消息管道 可配置多个缓存副本（推荐） Flume 直接写到目的地,Cloudera开源的一套日志传输系统，和Scribe相似。 Scribe Facebook开源的一套日志传输系统，将源日志传输到Hadoop等分布式文件系统中。 Sqoop 用于传统数据库和Hadoop之间的数据传输。 RDL 结构化和非结构化数据传输组件
相关文章
- 1. 大数据技术总结
- 2. 大数据技术MapReduce开发总结
- 3. 数据库技术总结
- 4. 大数据技术学习之Spark技术总结
- 5. 数据定义将来——2016数据库技术大会总结
- 6. 数据库新技术前沿总结
- 7. 数据库技术基础总结
- 8. 【数据挖掘】技术点总结
- 9. 大数据技术
- 10. 大数据技术-Flume拓扑结构
- 更多相关文章...
- • XML 相关技术 - XML 教程
- • 数据库涉及到哪些技术？ - MySQL教程
- • Flink 数据传输及反压详解
- • 算法总结-双指针
相关标签/搜索
每日一句
-
每一个你不满意的现在，都有一个你没有努力的曾经。
欢迎关注本站公众号,获取更多信息
相关文章
- 1. 大数据技术总结
- 2. 大数据技术MapReduce开发总结
- 3. 数据库技术总结
- 4. 大数据技术学习之Spark技术总结
- 5. 数据定义将来——2016数据库技术大会总结
- 6. 数据库新技术前沿总结
- 7. 数据库技术基础总结
- 8. 【数据挖掘】技术点总结
- 9. 大数据技术
- 10. 大数据技术-Flume拓扑结构