ElasticStack学习（二）：ElasticStack安装与运行

　　1、ElasticSearch的安装与运行

　　一、因为ElasticSearch是由Java语言开发的，若要运行ElasticSearch，须要安装并配置JDK，并要设置$JAVA_HOME环境变量。

　　二、ElasticSearch版本对于Java依赖的说明：

　　　　1）ElasticSearch5.0须要Java8以上的版本；

　　　　2）ElasticSearch6.5开始支持Java11；

　　　　3）从ElasticSearch7.0开始，内置了Java环境；

　　　　4）下图是ElasticSearch和JVM的对应关系矩阵：https://www.elastic.co/cn/support/matrix#matrix_jvm

　　　　 

 　　三、ElasticSearch下载说明

　　　　1）下载地址：https://www.elastic.co/cn/downloads/elasticsearch

　　　　2）ElasticSearch能够运行在主流操做系统上，同时也能够运行在Docker中；

　　　　3）本人电脑是Windows系统，因此下载的是ElasticSearch的Windows版本；

　　四、ElasticSearch安装过程--前台模式（Windows系统）

　　　　1）ElasticSearch在Windows上的安装提供了两种形式，一种是以zip文件的形式进行解压；一种是以MSI文件的形式进行安装；之前一般是以zip文件的形式在Windows上进行安装，如今以MSI文件格式进行安装也是可行的，它提供了一种最简便的入门体验；

　　　　2）咱们采用以zip文件的形式进行安装。首先将下载完毕的ElasticSearch压缩包进行解压，此时会建立一个名称为ElasticSearch-x.x.x的文件夹，将其设置为$ES_HOME环境变量的引用路径；

　　　　

　　　　3）打开命令窗口，进入到当前ElasticSearch的目录中，以下图所示：

　　　　

　　　　4）运行ElasticSearch，进入bin目录下，执行elasticsearch.bat文件。如若想中止运行ElasticSearch，按Ctrl+C；

　　　　

　　　　5）验证ElasticSearch是否正在运行，经过发送Http请示，向localhost:9200进行请求。若ElasticSearch运行正常，则返回以下结果：

　　　　

　　五、ElasticSearch安装过程--后台模式（Windows系统）

　　ElasticSearch能够做为一个服务在后台进行运行，或当系统启动时能够自动运行，不须要人为干预。服务安装能够经过bin目录下面的elasticsearch-service.bat脚原本实现，该脚本能够实现安装、卸载、管理和配置服务，并能够启动和中止服务，全部操做都可以经过命令行来完成。以下所示：

1 G:\elasticsearch-7.2.0\bin>elasticsearch-service.bat 2 
3 可操做的命令：install|remove|manage|start|stop [service_id]

 　　因此，执行该脚本，须要一个命令参数。同时，根据状况须要一个service_id，也就是可选参数。

　　在安装服务时，确保服务的名称和JAVA_HOME是可用的，以下图所示：

　　

　　六、ElasticSearch文件目录结构

　　

　　七、JVM配置说明

　　在config目录中jvm.options文件里，对JVM的默认配置为1GB。在生产环境中，建议最大与最小内存设置成同样的，最大内存不要超过机器的50%，同时内存的总量不要超过30GB。相关文章可参照：www.elastic.co/blog/a-heap-of-trouble

 　　八、ElasticSearch插件的安装

　　执行bin目录中elasticsearch-plugin脚本，查看目前已经安装的插件，以下图所示：

　　

　　能够看出目前没有安装任何插件，如今能够安装一个分词插件analysis-icu，以下图所示：

　　

　　能够看到，正在从elastic站点进行插件的下载和安装。

 

　　2、Kibana的安装与运行

　　一、Kibana下载地址：https://www.elastic.co/downloads/kibana ；

　　二、将下载的压缩包进行解压缩，若是须要对kibana进行一些配置，能够在config目录下面的kibana.yml文件中进行修改；

　　三、首先将ElasticSearch运行起来，由于kibana是基于ElasticSearch进行运行的；

　　四、kibana运行的默认端口是5601，向浏览器中访问：http://localhost:5601，可见以下图所示：

　　

　　五、经过点击添加样例数据连接，能够看到以下图：

　　

　　咱们能够添加关于电商、航空、网络日志三种样例数据。

　　六、另外，在kibana中的DevTool是一个颇有用的工具，它能够调试ElasticSearch的API；

　　七、若要想对kibana进行汉化，从kibana6.8和ES7.0开始支持，在config目录中，对kibana.yml文件中的i18n.locale项设置成: "zh-CN"，也就是i18n.locale: "zh-CN"就能够了。

 

　　3、Logstash的安装与运行

　　一、Logstash的下载地址：https://www.elastic.co/cn/downloads/logstash

　　二、从https://grouplens.org/datasets/movielens/地址中下载最小的测试数据集，将下载的数据集中的movies.csv文件导入到ElasticSearch中；

　　三、在Logstash目录下面的bin目录下面创建Logstash.conf文件，配置内容以下：

input {
  file {
    path => ["G:/logstash-7.2.0/sample-source/movies.csv"]
    start_position => beginning
    sincedb_path => "G:/logstash-7.2.0/abc"
  }
}
filter {
  csv {
    separator => ","
    columns => ["id","content","genre"]
  }

  mutate {
    split => { "genre" => "|" }
    remove_field => ["path", "host","@timestamp","message"]
  }

  mutate {

    split => ["content", "("]
    add_field => { "title" => "%{[content][0]}"}
    add_field => { "year" => "%{[content][1]}"}
  }

#  mutate {

#    gsub => [
#      
#      "year", "\\)", ""
#    ]
#  }


  mutate {
    convert => {
      "year" => "integer"
    }
    strip => ["title"]
    remove_field => ["path", "host","@timestamp","message","content"]
  }



}
output {
   elasticsearch {
     hosts => "http://localhost:9200"
     index => "movies"
     document_id => "%{id}"
   }
  stdout {}
}

 　　四、打开cmd，进行Logstash目录下面的bin目录下，执行logstash -f logstash.conf，会将数据导入到ElasticSearch中，以下图所示：

　　

 

　　你们可关注个人公众号

　　

　　知识学习来源：《Elasticsearch核心技术与实战》