常用的离线统计的框架

点击上方蓝字进行关注的都是靓仔和仙女 简介 首先我们先来简单的介绍一下离线统计。 离线统计就是在计算开始前已知所有输入数据,输入数据不会产生变化,且在解决一个问题后就要立即得出结果的前提下进行的计算。在大数据中属于数据的计算部分,在该部分中与离线计算对应的则是实时计算。 在离线统计中,使用 Hdfs存储数据,使用 MapReduce 做批量计算,计算完成的数据如需数据仓库的存储,直接存入Hive
相关文章
相关标签/搜索