分布式数据日志收集之Flume的安装和使用
来源:互联网 发布:java解析log日志文件 编辑:程序博客网 时间:2024/06/05 04:52
1.在http://archive.cloudera.com/cdh5/cdh/5/下载,相应的版本(我是用的flume-ng-1.5.0-cdh5.3.6.tar.gz),
然后解压,进入conf目录下,将flume-env.sh.template复制并重新命名为 flume-env.sh,配置JAVA_HOME,并且配置相应的JAVA_OPTS
(可以默认)
2.为了实验flume的使用在conf目录下创建test1.conf,并且内容为:
a1.sources=r1a1.channels=c1a1.sinks=k1a1.sources.r1.type=netcata1.sources.r1.bind=0.0.0.0a1.sources.r1.port=4444a1.sources.r1.channels=c1a1.channels.c1.type=memorya1.channels.c1.capacity=1000a1.channels.c1.transactionCapacity=100a1.sinks.k1.type=loggera1.sinks.k1.channel=c1
3)启动flume:flume-ng agent --conf ./conf/ --conf-file test1.conf --name a1 -Dflume.root.logger=INFO,console
4)在win上使用telnet IP 端口,进行测试
阅读全文
0 0
- 分布式数据日志收集之Flume的安装和使用
- Flume 分布式日志收集
- 使用hive来分析flume收集的日志数据
- 使用hive来分析flume收集的日志数据
- 分布式日志收集系统:Flume
- 大数据系列教程_分布式日志收集flume
- 日志收集之Flume
- flume学习(六):使用hive来分析flume收集的日志数据
- flume学习(六):使用hive来分析flume收集的日志数据
- flume学习(六):使用hive来分析flume收集的日志数据
- flume学习(六):使用hive来分析flume收集的日志数据
- flume学习(五):使用hive来分析flume收集的日志数据
- flume使用之flume+hive 实现日志离线收集、分析
- 分布式日志收集收集系统:Flume(转)
- Flume分布式日志收集收集系统
- 分布式日志收集收集系统:Flume
- 分布式日志收集收集系统:Flume
- 分布式日志收集系统Apache Flume的设计介绍
- android流分析
- Python爬取全国主要城市经纬度坐标
- Codeforces 238E:Meeting Her
- Opencv学习之图像直方图
- 异常的处理
- 分布式数据日志收集之Flume的安装和使用
- 设计模式之单例模式
- STM32F4工程模板建立与时钟的设置方法
- in和exists
- thinkphp框架page类与bootstrap分页(美化)
- Weblogic部署项目三种方式
- 自定义View 之ImageView(二) 圆角ImageView
- Akka(10): 分布式运算:集群-Cluster
- GLSurfaceView的简单分析及巧妙借用