logstash经过webhdfs放入hdfs增长时间戳和host字段

1.问题描述

logstash经过webhdfs插件把数据放入hdfs的时候,发现每行数据的签名都增长了一个时间戳和host字段git

2018-12-19T08:30:30.234Z %{host} "128.1.1.2" "GET"

#2.资料查找 在网上找了不少资料,描述的都是webhdfs怎么使用,至于使用后的数据格式都没有说github

我去github的logstash-plugins下看了一下issues,看到了以下的文章,给出了解决办法web

https://github.com/logstash-plugins/logstash-output-webhdfs/issues/25

#3.解决办法 经过codec对输出数据进行format插件

codec => line {
        format => "%{message}"
    }
相关文章
相关标签/搜索