日志数据从kafka到hive是如何实现的

http://www.aboutyun.com/forum.php?mod=viewthread&tid=20701 php 背景java 公司的系统是一个对外提供服务的接口，每一次调用日志都须要保存到hive中，以便后期作数据分析。天天的调用量在亿级，日志数据量100G以上，在量级尚未这么大的时候，采起的办法比较原始：直接经过log4j打印到日志文件，而后经过抽数工具同步到hive中，天天凌晨同

>>阅读原文<<