ELK中的logstash启动后无输出
来源:互联网 发布:我的世界pe快速建造js 编辑:程序博客网 时间:2024/06/06 02:19
在《elasticsearch技术解析与实战》第370页第10章ELK应用,书中以收集Nginx日志为例来说明;我这里用的版本分别是elasticsearch-2.3.0、logstash-2.3.0、kibana-4.5.0;和书中的版本不同,在373页我按照书上的例子取一条典型的nxlog日志,保存文件名为nxlog_access.log,编写配置文件,文件名为logstash_nxlog.conf:
input{ file{ path => "D:/elasticsearch/logstash-2.3.0/nxlog_access.log" start_position => beginning }}filter{ grok{ match => { "message" => "%{COMBINEDAPACHELOG}" } }}output{ elasticsearch{ hosts => ["127.0.0.1:9200"] user => "es_admin" password => "123456" } stdout{ codec => rubydebug }}
当我先启动elasticsearch,再运行logstash -f ..\logstash_nxlog.conf ,结果并没有得到像书中样的输出,二是只显示了下面两句话:
然后光标就一直在“Pipeline main started"这一行下面闪烁,也无法输入,也没有得到期待的输出。后来在elasticsearch官网讨论区看到相似的问题,那个人对于这种情况是这么回答的:
翻译过来就是:这意味着logstash正在等待接收新数据,我已经指定让他读取那个log文件了,那里面已经有数据了呀,为什么还要等待新数据。接着看第二句话,意思是打开那个log文件,将末尾添加几行(有数据或空行都行)再保存。我试着做了,我添加了几行空行,一直按enter回车键保存了几行空行,刚按ctrl+s,马上控制台就有输出了:
如果你加了几行空行,虽然有输出了,但是那几行空行会解析错误,就会在控制台输入如下:
起码你知道哪里错了,但是为什么要追加并保存才会触发输出呢,网上有人说是logstash默认不处理一天前的文件,后来试验了一下发现确实是时间的问题,只不过这个时间是文件的创建时间或修改时间。今天是9月18日,刚开始我一直用的是6月份的nginx日志文件,怪不得启动logstash没有输出,后来新建一个txt文件,里面放入一条Apache日志,因为是今天创建的嘛,启动logstash后立马就看到输出了。
参考地址:http://ask.csdn.net/questions/337445
http://blog.csdn.net/zhaoyangjian724/article/details/52274656(logstash默认不处理一天前的文件)
https://discuss.elastic.co/t/no-response-after-pipeline-main-started/57167/2(官网讨论区)
- ELK中的logstash启动后无输出
- ELK测试笔记-filebeat输出到logstash
- ELK logstash 启动慢的解决方法
- 快速认识ELK中的L - Logstash
- 快速认识 ELK 中的 L:Logstash
- ELK -Logstash
- ELK(二)安装logstash
- ELK之Logstash
- ELK(一)Logstash
- ELK logstash 学习一
- ELK 之 Logstash
- ELK--Logstash入门
- ELK-ElasticSearch+Logstash+Kibana
- ELK-Logstash(1)
- ELK 之 Logstash
- logstash file输入,无输出原因与解决办法
- logstash file输入,无输出原因与解决办法
- ELK学习13_logstash启动报错[logstash.outputs.elasticsearch] Unknown setting 'host' for elasticsearch
- Linux笔记之配置2:配置网卡信息
- webpack 升级Getting error: configuration.resolve.extensions[0] should not be empty
- CentOS7中systemctl的使用
- NDK手动指定文件再build
- WPF Control Development Unleashed(wpf控件开发揭秘) 章节二 不同的可视化类结构(未完成)
- ELK中的logstash启动后无输出
- 2017 ACM-ICPC 亚洲区(西安赛区)网络赛 C. Sum
- 剑指offer 20 顺时针打印矩阵
- Eclipse 设置控制台不打印包名+类型+@+地址
- 记一次网站渗透乌龙引发的头脑风暴
- webrtc中的位运算封装 BitBuffer
- gwu文档学习
- CSS 动画 过渡
- jquery点击图标来回切换的几种方法(如开关按钮)