TeraSort实验--测试Map和Reduce Task数量对Hadoop性能的影响

一、           实验环境 1个master节点, 16个slave节点: CPU:8GHZ , 内存: 2G 网络:局域网 二、           实验描述    通过Hadoop自带的Terasort排序程序,测试不同的map task和reduce task数量,对Hadoop性能的影响。    实验数据由程序中的teragen程序生成,数据量为1GB和10GB。    通过设置m
相关文章
相关标签/搜索