大数据项目及实现

1，离线数据处理：项目内容为经过对网站访问日志的采集和清洗，结合数据库中的结构化用户数据，统计并展现网站的PV、UV状况，以对网站的运行状况进行监控。经过此项目，回顾并串联前面讲述的离线数据处理相关技术，如：FIune、Sqoop、Hive、Spark等，了解和掌握PB级数据离线处理的通常过程和架构。算法 2，流式数据处理：项目内容为经过对数据库交易数据修改的实时同步，监控网站实时交易状况，以提升

>>阅读原文<<