flume学习(一):log4j直接输出日志到flume
来源:互联网 发布:淘宝店页面背景图 编辑:程序博客网 时间:2024/05/15 02:02
问题导读
1、如何让log4j直接输出日志到flume?
2、如何写一个简单的测试类来测试呢?
3、如何看到log4j的日志是否输出到了flume中?
log4j.properties配置:
复制代码
需要将/opt/cloudera/parcels/CDH-5.0.0-1.cdh5.0.0.p0.47/lib/flume-ng/tools/flume-ng-log4jappender-1.4.0-cdh5.0.0-jar-with-dependencies.jar添加到classpath下。
然后可以写一个简单的测试类来测试一下:
复制代码
然后写一个run.sh脚本运行这个类:
复制代码
执行run.sh,将sink设置为logger,去flume的日志文件里去看,可以看到log4j的日志输出已经传输到了flume中:
复制代码
1、如何让log4j直接输出日志到flume?
2、如何写一个简单的测试类来测试呢?
3、如何看到log4j的日志是否输出到了flume中?
log4j.properties配置:
- log4j.rootLogger=INFO
- log4j.category.com.besttone=INFO,flume
- log4j.appender.flume = org.apache.flume.clients.log4jappender.Log4jAppender
- log4j.appender.flume.Hostname = localhost
- log4j.appender.flume.Port = 44444
- log4j.appender.flume.UnsafeMode = true
需要将/opt/cloudera/parcels/CDH-5.0.0-1.cdh5.0.0.p0.47/lib/flume-ng/tools/flume-ng-log4jappender-1.4.0-cdh5.0.0-jar-with-dependencies.jar添加到classpath下。
然后可以写一个简单的测试类来测试一下:
- package com.besttone.flume;
-
- import java.util.Date;
-
- import org.apache.commons.logging.Log;
- import org.apache.commons.logging.LogFactory;
-
- public class WriteLog {
- protected static final Log logger = LogFactory.getLog(WriteLog.class);
-
- /**
- * @param args
- * @throws InterruptedException
- */
- public static void main(String[] args) throws InterruptedException {
- // TODO Auto-generated method stub
- while (true) {
- //每隔两秒log输出一下当前系统时间戳
- logger.info(new Date().getTime());
- Thread.sleep(2000);
- }
- }
- }
然后写一个run.sh脚本运行这个类:
- #!/bin/bash
- jarlist=`ls ./lib/*.jar`
- CLASSPATH='./bin/'
- for jar in ${jarlist}
- do
- CLASSPATH=${CLASSPATH}:${jar}
- done
- echo ${CLASSPATH}
-
- java -classpath "$CLASSPATH" com.besttone.flume.WriteLog &
执行run.sh,将sink设置为logger,去flume的日志文件里去看,可以看到log4j的日志输出已经传输到了flume中:
- 2014-07-16 14:23:54,193 INFO org.apache.flume.sink.LoggerSink: Event: { headers:{flume.client.log4j.log.level=20000, flume.client.log4j.message.encoding=UTF8, flume.client.log4j.logger.name=com.besttone.flume.WriteLog, flume.client.log4j.timestamp=1405491834189} body: 31 34 30 35 34 39 31 38 33 34 31 38 39 1405491834189 }
0 0
- flume学习(一):log4j直接输出日志到flume
- flume学习(一):log4j直接输出日志到flume
- flume学习(一):log4j直接输出日志到flume
- flume学习(一):log4j直接输出日志到flume
- flume学习(一):log4j直接输出日志到flume
- flume学习(一):log4j直接输出日志到flume
- flume学习(一):log4jAppender直接输出日志到flume的avro-source
- flume入门 log4j 输出日志到flume
- log4j输出日志到flume
- log4j输出日志到flume
- flume源码分析--Log4j日志直接发送到Flume过程分析(二)
- flume源码分析--Log4j日志直接发送到Flume过程分析(三)
- flume学习(三):flume将log4j日志数据写入到hdfs
- flume学习(五):flume将log4j日志数据写入到hdfs
- flume学习(五):flume将log4j日志数据写入到hdfs
- flume学习(二):flume将log4j日志数据写入到hdfs
- flume学习(三):flume将log4j日志数据写入到hdfs
- flume学习03-flume收集log4j日志
- 【POJ2774】Long Long Message,第一次的后缀数组
- 【python gensim使用】word2vec词向量处理中文语料
- JavaScript插入 引用 声明变量
- mysql mysql 1045 using password yes
- elasticsearch 的安装使用总结,在ubuntu上
- flume学习(一):log4j直接输出日志到flume
- C++primer_第四章_表达式_学习跟踪
- codevs#1116 [题解]四色问题 [key.搜索 dfs]
- POJ 3711 Scout YYF I 概率DP + 矩阵快速幂
- 第10.11补充-2
- 深入理解JVM07--虚拟机类加载机制--类加载过程
- flume学习(二):如何找到cm安装的flume的配置文件
- android点击菜单子项无响应的解决办法listView
- 开胃小菜—面向对象基础