大数据处理流程

大数据处理流程     上图是一个简化的大数据处理流程图，大数据处理的主要流程包括数据收集、数据存储、数据处理、数据应用等主要环节。下面将逐一对各个环节所需要的技术栈进行讲解：  数据采集 目前中大型项目通常采用微服务架构进行分布式部署，数据的采集需要在多台服务器上进行，且采集过程不能影响正常业务的开展。基于这种需求，就衍生了多种日志收集工具，如 Flume 、Logstash、Kibana 等，

>>阅读原文<<