流式计算的表明:Storm、Flink、Spark Streaming

我前面介绍的大数据技术主要是处理、计算存储介质上的大规模数据,这类计算也叫大数据批处理计算。顾名思义,数据是以批为单位进行计算,好比一天的访问日志、历史上全部的订单数据等。这些数据一般经过HDFS存储在磁盘上,使用MapReduce或者Spark这样的批处理大数据计算框架进行计算,通常完成一次计算须要花费几分钟到几小时的时间。编程 此外,还有一种大数据技术,针对实时产生的大规模数据进行即时计算处理
相关文章
相关标签/搜索