Flume+kafka+flink+es 构建大数据实时处理

大数据目前的处理方法有两种：一种是离线处理，一种是实时处理。如何构建我们自己的实时数据处理系统我们选用flume+kafka+flink+es来作为我们实时数据处理工具。因此我们的架构是： flume集群 kafka集群 flink集群 es集群 其具体架构如图   对于flume集群，它的作用就是采集数据并将数据提供给kafka集群，我们可以通过topic来实现。 对于zookeeper-kaf

>>阅读原文<<