logstash通过codec将完整的数据发送到kafka

来源:互联网 发布:陕西省中小学网络竞赛 编辑:程序博客网 时间:2024/05/17 06:11

业务需求,通过logstash解析日志后,需要发送一个份到kafka中。但在实际操作的时候发现一个很蛋疼的问题。就是logstash发送到kafka的数据竟然只是一个message。。对就是一个大括号包裹的message,其他什么都没有。。网上到处搜都没搜索相关问题,然后取官网看了看,发现一个codec插件很强大,用了一下果然能行。具体代码如下

 kafka {          codec => json          bootstrap_servers => "xxxx:9092"          topic_id => "tomcat-log"          codec => plain {                format => "%{message}"            }       }
阅读全文
0 0
原创粉丝点击