Logstash的使用
来源:互联网 发布:淘宝宝贝详情视频制作 编辑:程序博客网 时间:2024/05/13 04:27
现在有一个“用户画像”的项目;前期需要搭建一个ElasticSearch的集群用来存储用户的行为数据;在搭建好ES的集群后,导入数据到ES是一个问题,采用的是Logstash进行数据导入;现将Logstash使用过程中碰到的问题记录如下:
1. 刚刚接触Logstash,对各个参数都不熟悉,需要多次试验。但是最后发现,指定一个文件后,Logstash只读取一次,如果需要读取多次需要添加参数sincedb_path => "/dev/null" 。
2. 导入到 elastic search 中的数据的index和type是可以指定的,如果不指定,ES会根据时间生成一个index名。指定方法为添加两个参数 index => "xxx" 、document_type => "xxx"。
Logstash的详细配置方法参见:https://kibana.logstash.es/content/logstash/plugins/output/elasticsearch.html
阅读全文
0 0
- Logstash的使用
- LogStash的Filter的使用
- Logstash的安装和使用
- logstash的kafka插件使用
- ELK中logstash的使用
- Logstash的kafka插件使用
- logstash日志分析的配置和使用
- logstash日志分析的配置和使用
- logstash日志分析的配置和使用
- logstash日志分析的配置和使用
- logstash日志分析的配置和使用
- Logstash日志分析的配置和使用
- Elasticsearch、Logstash、Kibana、Filebeat的使用总结
- ELk Stack-5.0.0-Logstash的安装以及logstash-input-plugin-file使用
- Logstash学习19_CentOS下Logstash Sqlite input plugin 插件的使用
- 使用logstash的logstash-input-kafka插件读取kafka中的数据
- logstash安装和使用
- 开始使用Logstash
- 自定义Dialog初识
- Eclipse中Tomcat启动项目后404,单独启动正常
- CentOS 7搭建VPN服务器
- Android开发 之 矢量图及其动画
- SAP 常用的库存表
- Logstash的使用
- 蛋白质结构与功能的预测方法总结和资料汇总
- fabric源码解析5——kvledger初始化
- A
- nhmicro添加贷款进件管理与审批功能
- [读书笔记] 《Python 机器学习》- 过拟合的几种解决方法
- 《神经网络设计》读书笔记——反向传播算法
- oracle固定列的行列转换
- Mysql的七种表类型