flume学习（二）

flume安装

下载flume安装包

flume现在链接：
笔者当前使用的是flume1.5.0版本
apache版本【http://archive.apache.org/dist/flume/1.5.0/】
cdh版本【http://archive.cloudera.com/cdh5/cdh/5/flume-ng-1.5.0-cdh5.3.6.tar.gz】

安装

解压flume到指定目录
tar zxvf flume-ng-1.5.0-cdh5.3.6.tar.gz -C /opt/module

配置

• 进入flume的安装目录
  
  • cd /opt/modules/apache-flume-1.5.0-cdh5.3.6-bin/
• 修改配置文件
  # 修改文件 conf/flume-env.sh如果不存在则新建
# 配置java环境
export JAVA_HOME=/opt/modules/jdk1.7.0_67
# 配置javaopts
# -Xms100m -Xmx2000m允许使用的内存，根据自己机器的情况进行配置，如果配置的过低，当使用memory channel的时候很有可能会产生内存不足
export JAVA_OPTS="-Xms100m -Xmx2000m -Dcom.sun.management.jmxremote"


• 将flume的bin目录配置到PATH中

  export FLUME_HOME=/opt/modules/apache-flume-1.5.0-cdh5.3.6-bin/export PATH=$PATH:$FLUME_HOME/bin>> source /etc/profile

测试

[hadoop@dev-hadoop-single ~]$ flume-ng version
Flume 1.5.0-cdh5.3.6
Source code repository: https://git-wip-us.apache.org/repos/asf/flume.git
Revision: e97c9912e8b940cf493c2392d2b113b97194cffb
Compiled by jenkins on Tue Jul 28 15:21:40 PDT 2015
From source with checksum e4d03999f62abb1c9e9f34054fe59f06