ELK stack5.3.1搭建

这几天搭建ELK 5.3版本遇到了很多坑，网上好多的教程都是2版本的搭建，在安装插件的时候遇到了好多问题

ELK 包括：

elasticsearch：是一个基于Lucene的搜索服务器。日志分布式存储/搜索工具，原声支持集群。不仅仅是存储文档，还可以索引每个文档的内容被搜索。可以对文档进行索引、搜索、排序、过滤。

logstash：是一个接收，处理，转发日志的工具。可以从本地磁盘，网络服务（自己监听端口，接受用户日志），消息队列中收集各种各样的日志，然后进行过滤分析，并将日志输出到Elasticsearch中。

kibana：开源的数据分析与可视化平台。它简单、基于浏览器的接口使你能快速创建和分享实时展现Elasticsearch查询变化的动态仪表盘。对Elasticsearch中存储的日志进行展示，还可以生成炫丽的仪表盘。

我的环境是：

搭建：

1，搭建java环境（jdk8以上）：安装rpm包，配置环境，vi /etc/profile

export JAVA_HOME=/usr/java/jdk1.8.0_92/

export CLASSPATH=.:${JAVA_HOME}/lib:${JAVA_HOME}/jre/lib

export PATH=${JAVA_HOME}/bin:$PATH

source /etc/profile

查看是否配置完成：java -version

2，下载三个软件的压缩包，去官网下载，随便解压到什么位置。

修改配置文件：vim /config/elasticsearch.yml

network.host: 0.0.0.0

http.port: 9200

http.cors.enabled: true
http.cors.allow-origin: "*"

3，启动elasticsearch：到elasticsearch目录下执行bin/elasticsearch

遇到的问题：1）max virtual memory areas vm.max_map_count [65530] likely too low, increase to at least [262144]

切换到root用户修改配置sysctl.conf

vi /etc/sysctl.conf

添加下面配置：

vm.max_map_count=655360

并执行命令：

sysctl -p

（2），Java HotSpot(TM) 64-Bit Server VM warning: INFO: os::commit_memory(0x0000000085330000, 2060255232, 0) failed; error='Cannot allocate memory' (errno=12)：默认分配jvm空间大小为2g，修改jvm空间分配，改成512M

4，安装head：修改 elasticsearch/config/elasticsearch.yml

添加 http.cors.enabled:truehttp.cors.allow-origin:"*"

https://github.com/mobz/elasticsearch-head 下载zip在随便一个文件夹下解压

安装nodejs

cd /你的路径/elasticsearch-head

npm install -g grunt-cli

npm install

grunt server 启动

http://localhost:9100/

5，配置logstash：

在Logstash的目录下执行./bin/logstash -e 'input { stdin { } } output { stdout {} }'命令，启动Logstash。

启动完成后，直接在控制台中输入HelloWorld，然后回车，将会在控制台中打印出刚才输入的Helloworld。

在Logstash的目录下，通过vim logstash-test.conf命令，创建Logstash的配置文件。配置文件内容如下。

input { stdin { } }

output {

  elasticsearch {

    hosts => ["本机IP:9200"]

    user => elastic

    password => changeme

  }

  stdout { codec => rubydebug }

}

在Logstash目录下，执行./bin/logstash -f logstash-test.conf命令，Logstash将会按照配置文件中的配置进行服务启动。

6，配置Kibana：

Kibana的配置文件位于解压后的conf目录下，执行vim kibana.yml命令进行配置文件的修改。

server.host: "本机IP"

elasticsearch.url: "http://本机IP:9200"

在Kibana目录下，执行./bin/kibana命令，启动服务。