流式计算——storm背景引入

一、离线计算与流式计算 离线计算 离线计算:批量获取数据、批量传输数据、周期性批量计算数据、数据展示 代表技术:Sqoop批量导入数据、HDFS批量存储数据、MapReduce批量计算数据、Hive批量计算数据、***任务调度 主要工作:hivesql、调度平台、Hadoop集群运维、数据清洗(脚本语言)、元数据管理、数据稽查、数据仓库模型架构 流式计算  流式计算:数据实时产生、数据实时传输、数
相关文章
相关标签/搜索