hadoop yarn日志分离

根据hdfs的auditlog以及fsimage分析,yarn的日志文件占用了10%-20%的rpc请求以及文件量,这对namenode的性能有比较大的影响,特别是当集群规模越来越大,会影响生产业务。故下面的方案对yarn日志进行拆分,将日志写入一个独立的hdfs集群   运行yarn的集群(pascdev),日志写入集群(pasc) 一、   配置 hdfs-site.xml //添加日志写入集
相关文章
相关标签/搜索