大数据实时分析架构

flume+kafka+flink+hbase 实时分析架构## 总体架构 各个业务系统的消息源多种多样,使用 flume 做为消息的采集端,有必定的扩展性,采集的消息发往hdfs直接保存和消息管道进行实时计算。中间传输层采用Kakfa,可以支撑海量数据的数据传递。将消息持久化到磁盘中,并对消息建立了备份保证了数据的安全。Kafka在保证了较高的处理速度的同时,又能保证数据处理的低延迟和数据的零丢
相关文章
相关标签/搜索