elk 日志分析系统Logstash+ElasticSearch+Kibana4
来源:互联网 发布:知乎app 离线 编辑:程序博客网 时间:2024/05/17 03:03
elk 日志分析系统
Logstash+ElasticSearch+Kibana4
- logstash 管理日志和事件的工具
- ElasticSearch 搜索
- Kibana4 功能强大的数据显示客户端
- redis 缓存
安装包
- logstash-1.4.2-1_2c0f5a1.noarch.rpm
- elasticsearch-1.4.4.noarch.rpm
- logstash-contrib-1.4.2-1_efd53ef.noarch.rpm
- kibana-4.0.1-linux-x64.tar.gz
安装jdk
openjdk或者Oracle的jdk都可以。
这里用openjdk
yum install java-1.7.0-openjdk
安装redis
yum install redis/etc/init.d/redis start查看redis中的键值redis-cli keys '*'
安装测试ElasticSearch
rpm -ivh elasticsearch-1.4.4.noarch.rpm确认9200端口监听有正常返回值即可:curl -X GET http://localhost:9200[root@iZ28ywqw7nhZ ~]# curl -X GET http://localhost:9200{ "status" : 200, "name" : "Damballah", "cluster_name" : "elasticsearch", "version" : { "number" : "1.4.4", "build_hash" : "c88f77ffc81301dfa9dfd81ca2232f09588bd512", "build_timestamp" : "2015-02-19T13:05:36Z", "build_snapshot" : false, "lucene_version" : "4.10.3" }, "tagline" : "You Know, for Search"}
安装logstash
rpm -ivh logstash-1.4.2-1_2c0f5a1.noarch.rpm
logstash配置
最简单的是接受一个输入,然后将在输出出来:
bin/logstash -e 'input { stdin { } } output { stdout {} }'helo2015-03-19T09:09:38.161+0000 iZ28ywqw7nhZ helo
类似的还有:
bin/logstash -e 'input { stdin { } } output { stdout { codec => rubydebug } }'
但是上面两个并没有很大的实际意义,我们可以将数据插入到elasticsearch中,然后用kibana显示出来。
- 首先要确保elasticsearch启动,9200监听。
- 然后插入数据:
/opt/logstash/bin/logstash -e 'input { stdin { } } output { elasticsearch { host => localhost } }'
然后可以用kibana 查看
或者访问
curl ‘http://localhost:9200/_search?pretty’ 来查看数据
下载kibana,运行
kibana就是一个java包。
tar -xf kibana-4.0.1-linux-x64.tar.gzbin/kibana > kibana.log &
里面配置index patterns ,用默认的就行了。
后记
基本上elk都是连着用的,连官网都是同一个官方网站,比如说elasticsearch一般是从logstash上面取数据的。kibana 默认又是从elasticsearch上面取数据。三者结合的非常好。
更多功能正在探索中。elk 很强大的数据收集查询分析开源解决方案。
http://logstash.net/docs/1.4.2/tutorials/getting-started-with-logstash
http://www.cnblogs.com/buzzlight/p/logstash_elasticsearch_kibana_log.html
Logstash 最佳实践
Upgrade Required Your version of Elasticsearch is too old. Kibana requires Elasticsearch 0.90.9 or above.
init: tty (/dev/tty4) main process killed by KILL signal
list all indexs
curl ‘localhost:9200/_cat/indices?v’
delete
curl -XDELETE ‘localhost:9200/customer?pretty’
curl ‘localhost:9200/_cat/indices?v’
http://www.elastic.co/guide/en/elasticsearch/reference/1.x/_index_and_query_a_document.html
- elk 日志分析系统Logstash+ElasticSearch+Kibana4
- elk 日志分析系统Logstash+ElasticSearch+Kibana4
- elk 日志分析系统Logstash+ElasticSearch+Kibana4
- elk 日志分析系统Logstash+ElasticSearch+Kibana4
- Ubuntu 14.04搭建ELK日志分析系统(Elasticsearch+Logstash+Kibana)
- 搭建ELK(ElasticSearch+Logstash+Kibana)日志分析系统(十四) logstash grok 正则解析日志
- ELK(elasticsearch+logstash+kibana) 日志分析
- 搭建ELK(ElasticSearch+Logstash+Kibana)日志分析系统(一) Logstash demo演示
- 搭建ELK(ElasticSearch+Logstash+Kibana)日志分析系统(二) Logstash简介及常见配置语法
- 搭建ELK(ElasticSearch+Logstash+Kibana)日志分析系统(三) logstash input output 配置
- 搭建ELK(ElasticSearch+Logstash+Kibana)日志分析系统(四) logstash codec和filter 配置
- 搭建ELK(ElasticSearch+Logstash+Kibana)日志分析系统(五) 通过redis扩展logstash
- ELK(ElasticSearch, Logstash, Kibana)搭建日志分析平台-Logstash篇
- 搭建ELK(ElasticSearch+Logstash+Kibana)日志分析系统(六) ElasticSearch demo演示
- 搭建ELK(ElasticSearch+Logstash+Kibana)日志分析系统(七) elasticsearch.yml配置文件详细说明
- 搭建ELK(ElasticSearch+Logstash+Kibana)日志分析系统(九) elasticsearch简介及集群介绍
- 搭建ELK(ElasticSearch+Logstash+Kibana)日志分析系统(十) elasticsearch集群部署
- ELK(ElasticSearch, Logstash, Kibana)搭建日志分析平台-Elasticsearch篇
- Mysql 查询不连续ID
- delphi中的字符串,字符串数据,字符串指针的转换以及不同字符串格式的转换
- material design UI颜色的使用
- TCP/IP详解笔记(5)
- 20个非常有用的Java程序片段
- elk 日志分析系统Logstash+ElasticSearch+Kibana4
- 跳转验证
- Rotate Array
- iGrimace afc2和Appsync的安装
- httpclient4.x调用cxf发布的webservice的某个方法(有参数,有返回值)(未整合spring)
- 服务器端分页
- String.Empty、string=”” 和null的区别
- vtkCubeAxes的相关使用
- js setTimeout和setInterval