hadoop集群调优及MR调优

1、操做系统调优node 一、提升网络链接上限。以增长网络带宽的利用率，即修改内核net.core.somaxcon参数缓存 二、关闭swap交换分区。以避免内存不足时，数据会溢写到磁盘，读取时再从磁盘读取，增长数据读取时间网络 三、调整预读缓存区的大小。将数据预读，减小磁盘IO时间框架 2、HDFS调优分布式 一、配置文件一：core-site.xmloop 1>hadoop.tmp.dir：手

>>阅读原文<<