Datanode占用磁盘IO高问题

hadoop集群版本：hadoop-2.7.2 问题现象： iotop排查有大量的du -sk 操作占用IO比较高，且执行很长时间； iostat -x 5： 磁盘IOutil 一直处于比较高的使用率，且iowait值比较大，io有一定的等待延迟； 问题原因： Datanode进程启动时，启动DU线程定期执行du –sk命令统计各blockpool目录的占用情况，随着心跳汇报给namenode。

>>阅读原文<<