大数据基础架构方案

大数据架构方案,主要包括整个大数据的软件栈,主要功能包括:数据抽取,数据存储,数据分析,数据挖掘web 下面是整个架构设计图: 数据库 数据抽取 关系型数据库,经过sqoop导入 日志文件经过flume导入架构 数据存储 采用hdfs,hbase等为数据存储的主体 对于文本检索则采用es/solr等搜索技术 分析后的结果数据能够采用关系型数据库存储框架 数据分析 采用spark,mapreduce
相关文章
相关标签/搜索