Flume - 安装及启动命令详解

安装Flume

1，到官网下载Flume，下载地址：http://flume.apache.org/download.html

2 ，[root@bicloud77 home]# tar zxvf apache-flume-1.5.2-bin.tar.gz

3， [root@bicloud77 home]# cd apache-flume-1.5.2-bin

4，[root@bicloud76 apache-flume-1.5.2-bin]# bin/flume-ng version
            Flume 1.5.2
            Source code repository: https://git-wip-us.apache.org/repos/asf/flume.git
            Revision: 229442aa6835ee0faa17e3034bcab42754c460f5
            Compiled by hshreedharan on Wed Nov 12 12:51:22 PST 2014
            From source with checksum 837f81bd1e304a65fcaf8e5f692b3f18
5，安装成功

6，启动命令：bin/flume-ng agent -c conf -f conf/flume-conf -n a1 -Dflume.root.logger=DEBUG,console

Flume启动参数

[root@bicloud77 bin]# ./flume-ng Error: Unknown or unspecified command ''Usage: ./flume-ng <command> [options]...commands:  help                  display this help text  agent                 run a Flume agent  avro-client           run an avro Flume client  version               show Flume version infoglobal options:  --conf,-c <conf>      use configs in <conf> directory  --classpath,-C <cp>   append to the classpath  --dryrun,-d           do not actually start Flume, just print the command  --plugins-path <dirs> colon-separated list of plugins.d directories. See the                        plugins.d section in the user guide for more details.                        Default: $FLUME_HOME/plugins.d  -Dproperty=value      sets a Java system property value  -Xproperty=value      sets a Java -X optionagent options:  --conf-file,-f <file> specify a config file (required)  --name,-n <name>      the name of this agent (required)  --help,-h             display help textavro-client options:  --rpcProps,-P <file>   RPC client properties file with server connection params  --host,-H <host>       hostname to which events will be sent  --port,-p <port>       port of the avro source  --dirname <dir>        directory to stream to avro source  --filename,-F <file>   text file to stream to avro source (default: std input)  --headerFile,-R <file> File containing event headers as key/value pairs on each new line  --help,-h              display help text  Either --rpcProps or both --host and --port must be specified.Note that if <conf> directory is specified, then it is always included firstin the classpath.

命令

参数
描述
help
打印帮助信息
agent
运行一个Flume Agent
avro-client
运行一个Avro Flume 客户端
version
显示Flume版本。

全局选项

参数
描述
--conf,-c <conf>
在<conf>目录使用配置文件。指定配置文件放在什么目录
--classpath,-C <cp>
追加一个classpath
--dryrun,-d
不真正运行Agent，而只是打印命令一些信息。
--plugins-path <dirs>
插件目录列表。默认：$FLUME_HOME/plugins.d
   -Dproperty=value   设置一个JAVA系统属性值。   -Xproperty=value   设置一个JAVA -X的选项。

Agent选项

参数
描述
--conf-file,-f <file>
指定配置文件，这个配置文件必须在全局选项的--conf参数定义的目录下。（必填）
--name,-n <name>
Agent的名称（必填）
--help,-h
帮助

Avro客户端选项

参数
描述
--rpcProps,-P <file>
连接参数的配置文件。
--host,-H <host>
Event所要发送到的Hostname。
--port,-p <port>
Avro Source的端口。
--dirname <dir>
Avro Source流到达的目录。
   --filename,-F <file>   Avro Source流到达的文件名。   --headerFile,-R <file>   设置一个JAVA -X的选项。

启动Avro客户端要么指定--rpcProps，要么指定--host和--port。