大数据技术之Flume

大数据技术之Flume 概述 Flume定义 ​ Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构(采集日志的单位是一行),灵活简单 Flume最主要的作用就是:实时读取服务器本地磁盘的数据,将数据写入HDFS Flume的优点 可以与任意存储进程集成 输入的数据速率大于写入目的的存储速率,flume会进行缓冲,减小hdfs的
相关文章
相关标签/搜索