大数据解决方案：实时日志处理系统架构及整体思路

1.实时日志处理系统架构及整体思路   整个系统分为三层：收集(Agent)层，汇总(Collector)层和处理层。 其中Agent层采用flume收集日志，每个机器部署一个进程，负责对单机的日志收集工作； Collector层flume部署在后端服务器上，负责接收Agent层发送的日志，汇总并决定最终流向； 对于单个日志文件的服务器，flume采用传统的source-channel-sink配

>>阅读原文<<