YARN的Log Aggregation原理

文章目录 前言 Log Aggregation 日志的汇聚 日志的retain策略 Log Aggregation的查询 Log Aggregation流程图 前言 在大数据的时代，我们想从数据中去分析提炼出有价值的东西，背后有时是成百上千个任务的运算结果。在一些比较大的数据平台的规模下，出一份第二天的详尽的数据报表信息，需要前一天跑上数十万级别的任务数。更直接地来说，我们的计算平台单日内需要调度

>>阅读原文<<