大数据方案-数仓建设

阿里云方案 基于阿里云日志服务实现，拉取阿里云日志到本地数据库存储。 优势：实施速度快。 缺点：依赖阿里云日志服务，扩展性和灵活性较差。前端 自研方案 前端、云端、Nginx等不一样格式的日志发送到Kafka消息队列，以后作ETL数据清洗，以后能够使用Storm作实时计算或使用Hive/Spark Streaming作离线批处理，处理结果存储在Hbase中，使用Redis作缓存，ES作索引。维度等

>>阅读原文<<