大数据日知录理解(1)

一、系统拓展性 提高系统拓展性主要分为两种:一种为增加单机数量;一种为提高单机硬件资源配置。我们接触的大多数大数据存储与计算系统一般采用第一种方式来提高拓展性。 二、数据分片与数据复制 数据分片: 之前在Hadoop的学习中也涉及到这个概念,目的是把数据切分;在Hadoop中有一个block块的概念,Hadoop2.7.3中把一个block块设置为128m,如果处理一个文件,这个文件大于128m,
相关文章
相关标签/搜索