Kafka巨量数据写文件

最近一个项目用到kafka 客户端接收消息，要求是写入文件（按顺序）。java 有2个思路：shell 1. 利用log4j去写文件，优势是稳定可靠，文件根据设置，自动分隔大小。缺点是没有办法作到 当写文件到必定数量或者必定时间后，自动切换目录的功能。若是循环写文件，好比设置最多保留10个，那么就须要用shell脚本去定时备份转移这些文件，固然也是能解决的。可是用代码解决这个问题也很简单：缓存 /

>>阅读原文<<