flume使用之flume+hive 实现日志离线收集、分析

在现在互联网行业中，数据的收集特别是日志数据的收集已经成为了系统的标配。将用户行为日志或者线上系统生产的数据经过flume收集起来，存放到数据仓库（hive）中，而后离线经过sql进行统计分析，这一套数据流的建设对系统有很是重要的意义。html   一、思路：java 1）线上系统经过log4j将数据打印到本地磁盘上；node 2）在线上系统服务器上安装flume，做为agent使用exec so

>>阅读原文<<