ELK分布式框架做为如今大数据时代分析日志的常为你们使用。如今咱们就记录下单机Centos7部署ELK的过程和遇到的问题。html
系统要求:Centos7(内核3.5及以上,2核4G)
elk版本:6.2.4(较新版本)
jdk版本:1.8(必须为java1.8版本)java
1、下载须要软件
一、ELK下载地址
https://www.elastic.co/downloads/past-releases
二、jdk下载地址
http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
三、所需软件列表
#文件默认放到/opt目录下
jdk-8u131-linux-x64.tar.gz
elasticsearch-6.2.4.rpm
kibana-6.2.4-x86_64.rpm
logstash-6.2.4.rpm
2、 安装JAVA
一、解压
tar -zxvf jdk-8u131-linux-x64.tar.gz -C /usr/local/
ln -s /usr/local/jdk1.8.0_131/ /usr/local/jdk
二、配置环境
vim /etc/profile
#最后面添加如下配置文件
export JAVA_HOME=/usr/local/jdk
export JRE_HOME=$JAVA_HOME/jre
export PATH=$PATH:$JAVA_HOME/bin
三、验证结果
source /etc/profile
java -version
#检查结果:
java version "1.8.0_131"
Java(TM) SE Runtime Environment (build 1.8.0_131-b11)
Java HotSpot(TM) 64-Bit Server VM (build 25.131-b11, mixed mode)
3、部署elasticsearch
一、 rpm安装
cd /opt
rpm -ivh elasticsearch-6.2.4.rpm
建立用户
groupadd elasticsearch
useradd -g elasticsearch elasticsearch
二、修改elasticsearch配置文件
2.1 vim /etc/elasticsearch/elasticsearch.yml
[root@localhost elasticsearch]# cat elasticsearch.yml | grep -v "^#" | grep -v "^$"
path.data: /var/lib/elasticsearch
path.logs: /var/log/elasticsearch
network.host: "0.0.0.0"
http.port: 9200
2.2 vim /etc/elasticsearch/jvm.options(根据本身服务器配置修改)
-Xms512m
-Xmx512m
2.3 vim /etc/sysconfig/elasticsearch
JAVA_HOME=/usr/local/jdk
三、安装x-pack插件
cd /usr/share/elasticsearch/bin
./elasticsearch-plugin install x-pack
安装时间比较长,需耐心等待......
四、启动elasticsearch
systemctl start elasticsearch
五、检查启动状况
5.1 查看启动状态
systemctl status elasticsearchnode
5.2 查看启动日志
cd /var/log/elasticsearch/
tail -f elasticsearch.loglinux
5.3 检查端口状况
netstat -lntpvim
六、经过x-pack设置密码
cd /usr/share/elasticsearch/bin/
x-pack/setup-passwords interactive浏览器
七、登录测试
打开浏览器访问:http://10.244.78.230:9200ruby
能够看到对话框,输入用户名和密码就能够。默认的用户名:elastic服务器
访问成功!!!!
4、部署kibana
一、rpm安装
cd /opt
rpm -ivh kibana-6.2.4-x86_64.rpmoracle
二、修改配置文件
[root@localhost bin]# cat /etc/kibana/kibana.yml | grep -v "^#" | grep -v "^$"
server.port: 5601
server.host: "10.244.78.230"
elasticsearch.url: "http://10.244.78.230:9200"
elasticsearch.username: "elastic"
elasticsearch.password: "123456"
三、安装x-pack插件
cd /usr/share/kibana/bin/
./kibana-plugin install x-pack框架
四、启动kibana
systemctl start kibana
五、访问测试(默认端口为5601)
5、部署logstash
一、rpm安装
cd /opt
rpm -ivh logstash-6.2.4.rpm
二、修改配置文件
mkdir -p /usr/share/logstash/config
cp /etc/logstash/log4j2.properties /usr/share/logstash/config
[root@localhost logstash]# cat /etc/logstash/logstash.yml | grep -v "^#" | grep -v "^$"
node.name: logstash
path.data: /var/lib/logstash
path.config: /etc/logstash/conf.d
config.test_and_exit: True
path.logs: /var/log/logstash
三、编写测试conf
通常放在/etc/logstash/conf.d目录下
[root@localhost conf.d]# cat test.conf
input {
stdin {
}
}
output {
elasticsearch {
hosts =>["10.244.78.230:9200"]
index => "test-%{+YYYY.MM.dd}"
user => elastic
password => "123456"
}
stdout {
codec => rubydebug
}
}
四、测试运行
/usr/share/logstash/bin/logstash -f /etc/logstash/conf.d/test.conf(用来临时作测试用)
五、打开kibana查看
六、开启kibana
后期生产环境中,只需:
一、编写好conf文件
二、启动logstash便可,systemctl start logstash
七、kibana中x-pack认证问题
显示试用期为30天。预知如何增长时间,请看下回分解。
https://www.cnblogs.com/JeremyWYL/p/9482273.html