CDH集群IO测试

最近集群在运行Hive逻辑时，监控组经常会提出服务器报警，检测发现CDH集群存在较大的IO瓶颈。 日志数据IO测试，数据量134676620，逻辑：去重求总数，分组，排序。 优化思路：Hive引起的小文件问题和数据倾斜问题。 根本方案：提高服务器性能。

>>阅读原文<<