kafka 札记-----kafka producer 端 发送数据分为 同步(实时)和异步(达到设定发送条件)

来源:互联网 发布:centos自带gcc吗 编辑:程序博客网 时间:2024/06/14 05:14
kafka producer 端 发送数据分为 同步(实时)和异步(达到设定发送条件)

异步发送相关参数
producer.type  async/sync 默认是sync 
当满足以下其中一个条件的时候就触发 发送
batch.num.messages 异步发送 每次批量发送的条目 
queue.buffering.max.ms 异步发送的时候 发送时间间隔 单位是毫秒

一些相关参数
queue.buffering.max.messages 每次最大的提交量

queue.enqueue.timeout.ms -1/0 如果批量信息已经达到queue.buffering.max.messages 的数量 0 表示立即体检 如果队列满了之后就删除  -1 则满了也不会删除 默认是-1
send.buffer.bytes 缓冲区大小

参数可以参考
http://kafka.apache.org/08/configuration.html
0 0