flume消费文件夹消费不及处理办法
来源：互联网 发布：java 动态添加方法 编辑：程序博客网 时间：2024/04/28 16:00
文件生产速度过快，flume会出现消费不及的现象，下面这个参数调节一下应该会有改善：
maxBackoff
这个参数代表当source向channel放数据时检测到channel满了后等待多久再进行重试，默认是4秒。如果已经出现消费不及现象，channel频繁被撑满，然而满了后还要等很久，造成文件越来越多，降低这个参数可以有效缓解消费不及。
官网链接：http://flume.apache.org/FlumeUserGuide.html#spooling-directory-source
阅读全文
0 0
- flume消费文件夹消费不及处理办法
- kafka consumer不能消费消息及其处理办法
- flume到kafka，structuredStreaming从kafka消费
- RocketMQ源码分析----Broker处理消费请求
- 婚庆消费
- 今天消费
- “高端”消费
- 四月消费
- 五月份消费
- 六月份消费
- 体验消费
- 消费分类
- 消费经济学
- 生产消费
- ETC-消费
- 消费杠杆
- 生产消费
- 集群消费和广播消费
- angularJS实现分页
- Java内部类：上
- JAVA----文件拷贝
- 在lib下建文件夹 导入jar包 会报错 java.lang.ClassNotFoundException: org.springframework.web.context.ContextLoade
- 想成为高级java工程师需要具备什么
- flume消费文件夹消费不及处理办法
- traincascade训练程序中出现的(void*)(img.data + point.y * img.step + point.x * img.elemSize())
- Android Bluetooth 与 Headset 通信
- Post请求拼接参数的一大难点
- MySQL数据库操作步骤---"增删改查"
- C# 实现对象转字典
- 模版/模版函数的全特化/偏特化与类型萃取技术
- SDUT-oj 下沉的船
- java-反射（一）-反射的概念性学习
