大数据处理中的实时流式处理

大数据的实时流式处理问题的特点 数据源源不断的到来； 数据需要尽快的得到处理，不能产生积压； 处理之后的数据量依然巨大，仍然后TB级甚至PB级的数据量； 处理的结果能够尽快的展现； 以上四个特点可以总结为 数据的收集->数据的传输->数据的处理->数据的展现 其中数据的处理一般涉及数据的聚合，数据的处理和展现能够在秒级或者毫秒级得到响应。针对这些问题目前形成了 Flume + kafka + St

>>阅读原文<<