大数据架构之端到端方案综述(2)数据处理

序言:大数据处理的核心问题,一是海量数据如何存储?二是海量数据如何计算?传统的数据库处理,无论是存储数据的能力,还是处理数据的能力,在面对大量数据时,瓶颈渐显。大数据的诞生很好地处理了以上两个问题,传统数据处理体系和大数据体系的区别如下图所示: 本文将介绍大数据系统最基本组件之处理框架,按之前看过的文章,将其分为三大类: 仅批处理框架,Apache Hadoop,指处理大量数据的任务,无论直接从持
相关文章
相关标签/搜索