Flume用户手册

概述

      Apache Flume是一个分布式、高可靠和高可用的系统,它可以从不同数据源有效地收集、聚合和移动大量日志数据集中的一个数据存储。

架构

数据流模型

      一个事件是一个单位的数据流经一个Flume Agent。事件流从数据源流向channel并流入Sink,并由事件接口的一个实现。事件进行有效载荷(字节数组),是伴随着一个可选的组头(字符串属性)。Flume Agent是一个过程(JVM)托管的组件允许从外部源事件流到一个外部目的地。