elasticsearch 东八区问题
来源:互联网 发布:音乐截取软件手机 编辑:程序博客网 时间:2024/06/14 21:41
搭建ELK环境导入的数据发现,@timestamp时间永远比nginx日志里面的文件记录的时间少了8小时,比如日志文件里面一行记录,设置的字段时间为2017-06-22 09:33:26,但是导入到es里面时间变成"@timestamp": "2017-06-22T01:33:26.000Z",少了整整8个小时,但是kibana显示图表的时候却是没有。后来查资料知道这是es设置的东八区问题,kibana会根据浏览器国家自动添加时间,所以我们看到kibana上显示是正常的。
解决办法如下:
1.在查询条件上设置时区
QueryBuilders.rangeQuery("@timestamp").format("yyyy-MM-dd HH:mm:ss.SSS").gte("2017-06-22 00:00:00.000").lte("2017-06-22 23:59:59.999").timeZone("Asia/Shanghai")
Asia/Shanghai也可以替换成+8:00
2.logstash filter的时候添加字段,比如添加importtime字段
grok { match => { "message" => "\[visit_time:(?<ctime>.*)\],\[uid:(?<uid>.*)\],\[ip:(?<ip>.*)\],\[city_id:(?<cityid>.*)\],\[event:(?<event>.*)\],\[typeOnename:(?<typeOnename>.*)\],\[typeOnevalue:(?<typeOnevalue>.*)\],\[typetwoname:(?<typetwoname>.*)\],\[typetwovalue:(?<typetwovalue>.*)\],\[channel_type:(?<channel_type>.*)\],\[aid:(?<aid>.*)\],\[ticket_group_id:(?<ticket_group_id>.*)\],\[order_sn:(?<order_sn>.*)\],\[extends:(?<extends>.*)\]" } add_field => [ "importtime", "%{@timestamp}" ] } date { match => ["ctime", "YYYY-MM-dd HH:mm:ss"] target => "@timestamp" } ruby { code => "event.set('importtime', event.get('@timestamp').time.localtime + 8*60*60)" }用字段方法过滤后,在es里面会发现每行记录多了个importtime字段
阅读全文
1 0
- elasticsearch 东八区问题
- elasticsearch问题
- LogStash+ElasticSearch性能问题?
- elasticsearch 查询问题
- elasticsearch 环境配置问题
- ElasticSearch 相关问题汇总
- Elasticsearch运行问题
- elasticsearch安装问题
- ElasticSearch集群搭建问题
- elasticsearch遇到的问题
- ElasticSearch插入数据问题
- elasticsearch 分页问题
- ElasticSearch-问题总结
- Elasticsearch 用户启动问题
- elasticsearch安装问题总结
- Elasticsearch系列05:Elasticsearch集群问题处理
- 关于elasticsearch搜索不精确问题
- ElasticSearch集群配置及问题
- python3学习之运算符
- 利用jQuery.expr创建一个自己的伪类选择器
- 【Android动画】可滑动指示器 indicator
- 给定一个double类型的浮点数base和int类型的整数exponent。求base的exponent次方
- KPI之痛:有哪些奇葩的技术人员考核方式?
- elasticsearch 东八区问题
- Android Xml文件操作
- java字符串除法
- How to port new audio codec into Android
- [C++ 从入门到放弃-06]C++STL之multimap多重映照容器
- PAT甲级 1007. Maximum Subsequence Sum (25)
- 关于Toast的一些常见操作
- 正则表达式基础
- 获取任意小数点位的百分比表示