Flume的使用之二——实时监控文件的数据变化并发送到工作台
来源:互联网 发布:2016奥运男篮冠军数据 编辑:程序博客网 时间:2024/05/18 00:50
1.写配置文件
agent:exec source + memory channel + logger sink
a1.sources = r1
a1.sinks = k1
a1.channels = c1
a1.sources.r1.type = exec #exec source 可以运行一个给定的shell命令
a1.sources.r1.command = tail -F “预监听文件的路径”
a1.sources.r1.shell = /bin/sh -c
a1.sinks.k1.type = logger
a1.channels.c1.type = memory
a1.sources.r1.channels = c1
a1.sinks.k1.channel = c1
写入到example2.conf中
2.启动agent
flume-ng agent \
--name a1 \
--conf $FLUME_HOME/conf \
--conf-file $FLUME_HOME/conf/example2.conf \
-Dflume.root.logger=INFO,console
3.检测
向data.log中写入hello world
echo hello world >> data.log
控制台输出
成功
阅读全文
0 0
- Flume的使用之二——实时监控文件的数据变化并发送到工作台
- 实时监控文件夹及文件的变化
- Flume之监控文件内容变化
- Flume的使用一:从指定端口采集数据发送到工作台
- Android 监听短信内容变化,并发送到自己的手机
- 使用Ganglia监控Flume的性能指标数据
- C#实现实时监控文件目录下的变化
- 【Flume】从flume的监控度量数据XXXCounter来看JAVA并发编程中的CAS操作
- Spark Streaming之:Flume监控目录下文件内容变化,然后Spark Streaming实时监听Flume,然后从其上拉取数据,并计算出结果
- 使用Flume进行数据的实时收集处理
- 别人的工作台系列二
- rails 数据变化的监控
- rails 数据变化的监控
- Flume实时抽取监控目录数据
- Flume实时抽取监控目录数据
- Flume 读取实时更新的日志文件
- Flume 读取实时更新的日志文件
- 自定义注解:通过监控文件的变化,实时更改工厂管理的实例
- 快速排序
- 5 什么是LSTM-RNN(长短期记忆循环神经网络)?
- windows下切换jdk的默认版本(亲测!!!)
- 29.1认识HttpClient
- 分治法——棋盘覆盖问题
- Flume的使用之二——实时监控文件的数据变化并发送到工作台
- Python的基本输入输出函数
- Python3 基础语法
- Caffe 的可视化 (二)网络结构可视化
- 前端设计师如何提高UI界面中的阅读性
- 简单实用的Python计算器
- 复选框(checkbox)和单选框(radio)与文字水平垂直居中对齐的解决方法
- Python3更全面的支持中文
- Java Number&Math类