6我的如何维护上千规模的大数据集群？

本文主要介绍如何经过对计算引擎入口的统一，下降用户接入门槛；如何让用户自助分析任务异常及失败缘由，以及如何从集群产生的任务数据自己监控集群计算/存储资源消耗，监控集群情况，监控异常任务等。算法 其中 6 人的离线团队须要维护大数据集群规模以下：网络 Hadoop 集群规模 1300+架构 HDFS 存量数据 40+PB，Read 3.5 PB+/天，Write 500TB+/天app 14W MR

>>阅读原文<<