利用ELK搭建Docker容器化应用日志中心

时间 2019-11-07

标签利用 elk 搭建 docker 容器应用日志中心栏目 Docker 繁體版

原文原文链接

概述

应用一旦容器化之后，须要考虑的就是如何采集位于Docker容器中的应用程序的打印日志供运维分析。典型的好比 SpringBoot应用的日志收集。本文即将阐述如何利用ELK日志中心来收集容器化应用程序所产生的日志，而且能够用可视化的方式对日志进行查询与分析，其架构以下图所示：nginx

注：本文首发于 My 公众号 CodeSheep ，可长按或扫描下面的 当心心 来订阅 ↓ ↓ ↓

镜像准备

ElasticSearch镜像
Logstash镜像
Kibana镜像
Nginx镜像（做为容器化应用来生产日志）

开启Linux系统Rsyslog服务

修改Rsyslog服务配置文件：docker

vim /etc/rsyslog.conf

开启下面三个参数：数据库

$ModLoad imtcp
$InputTCPServerRun 514

*.* @@localhost:4560

意图很简单：让Rsyslog加载imtcp模块并监听514端口，而后将Rsyslog中收集的数据转发到本地4560端口！编程

而后重启Rsyslog服务：vim

systemctl restart rsyslog

查看rsyslog启动状态：c#

netstat -tnl

部署ElasticSearch服务

docker run -d  -p 9200:9200 \
 -v ~/elasticsearch/data:/usr/share/elasticsearch/data \
 --name elasticsearch elasticsearch

部署Logstash服务

添加 ~/logstash/logstash.conf 配置文件以下：浏览器

input {
  syslog {
    type => "rsyslog"
    port => 4560
  }
}

output {
  elasticsearch {
    hosts => [ "elasticsearch:9200" ]
  }
}

配置中咱们让Logstash从本地的Rsyslog服务中取出应用日志数据，而后转发到ElasticSearch数据库中！服务器

配置完成之后，能够经过以下命令来启动Logstash容器：架构

docker run -d -p 4560:4560 \
-v ~/logstash/logstash.conf:/etc/logstash.conf \
--link elasticsearch:elasticsearch \
--name logstash logstash \
logstash -f /etc/logstash.conf

部署Kibana服务

docker run -d -p 5601:5601 \
--link elasticsearch:elasticsearch \
-e ELASTICSEARCH_URL=http://elasticsearch:9200 \
--name kibana kibana

启动nginx容器来生产日志

docker run -d -p 90:80 --log-driver syslog --log-opt \
syslog-address=tcp://localhost:514 \
--log-opt tag="nginx" --name nginx nginx

很明显Docker容器中的Nginx应用日志转发到本地syslog服务中，而后由syslog服务将数据转给Logstash进行收集。框架

至此，日志中心搭建完毕，目前一共四个容器在工做：

实验验证

浏览器打开localhost:90来打开Nginx界面，并刷新几回，让后台产生GET请求的日志
打开Kibana可视化界面：localhost:5601

收集Nginx应用日志

查询应用日志

在查询框中输入program=nginx可查询出特定日志

后记

做者更多的SpringBt实践文章在此：

若是有兴趣，也能够抽点时间看看做者一些关于容器化、微服务化方面的文章：