Flume之监听目录变化
来源:互联网 发布:淘宝上的酒是真的吗 编辑:程序博客网 时间:2024/04/30 13:08
vim /usr/local/flume/conf/exec-dir.conf
# Name the components on this agent
#定义了当前agent的名字叫做a1a1.sources = r1
a1.sinks = k1
a1.channels = c1
# Describe/configure the source
a1.sources.r1.type = spooldir
a1.sources.r1.spoolDir = /opt/data/logs
a1.sources.r1.fileHeader = true
# Describe the sink
a1.sinks.k1.type = logger
# Use a channel which buffers events in memory
a1.channels.c1.type = memory
a1.channels.c1.capacity = 1000
a1.channels.c1.transactionCapacity = 100
# Bind the source and sink to the channel
a1.sources.r1.channels = c1
a1.sinks.k1.channel = c1
//启动脚本
flume-ng agent -c conf -f exec-dir.conf --name a1 -Dflume.root.logger=INFO,console
0 0
- Flume之监听目录变化
- Flume之监听目录变化并上传文件到HDFS中
- Spark Streaming之:Flume监控目录下文件内容变化,然后Spark Streaming实时监听Flume,然后从其上拉取数据,并计算出结果
- Flume实战监听文件夹内文件变化
- Flume之监控文件内容变化
- jdk7 新特性 监听文件目录变化
- Android之监听短信变化
- Vue之监听数据变化
- Flume监听文件目录sink至hdfs配置
- Flume监听文件目录sink至hdfs配置
- Flume监听文件目录sink至hdfs配置
- flume 1.7 新接口,监控文件内容变化,且监控目录内新增文件变化
- Android工具之监听电量变化
- 模拟使用Flume监听日志变化,并且把增量的日志文件写入到hdfs中
- Flume监听文件夹中的文件变化,并把文件下沉到hdfs
- Flume-og和Flume-ng的变化
- flume简介与监听文件目录并sink至hdfs实战
- js 小技巧之监听文本框内容变化
- 第二章 循环结构程序设计
- python基础学习(四):条件和分支
- Leetcode学习(23)—— Contains Duplicate
- RecyclerView点击事件与长按事件
- Auto Disturbances Rejection Control (ADRC) Technique阅读
- Flume之监听目录变化
- zookeeper 入门系列 : paxos 协议
- setValue:forUndefinedKey:]: this class is not key value coding-compliant for the key
- hdu 6026 Deleting Edges(最短路)
- gulp详细入门教程
- Android自定义View-仿华为手机管家病毒查杀类似于雷达扫描动画效果
- OC 的反射机制
- eclipse安装JAVA反编译插件
- 实现数字从零动态跳动到(规定)最大值或原始值