Kafka性能测试分析
来源:互联网 发布:算法谜题 百度云 编辑:程序博客网 时间:2024/05/22 06:37
本文来源 http://blog.csdn.net/u013970991/article/details/52061794
本文作者是一位非常有经验的Java 开发人员,博客值得细心钻研
一、测试环境准备
Cpu 内存 硬盘
Kafka集群,服务器个数:3台
采用CMS垃圾回收
JVM运行参数
- 1
- 2
- 3
- 4
- 5
- 6
- 7
- 8
Kafka server端配置
- 1
- 2
- 3
- 4
- 5
- 6
- 7
- 8
- 9
- 10
- 11
- 12
- 13
- 14
- 15
- 16
- 17
- 18
- 19
- 20
- 21
测试命令行如下
生产者:
- 1
- 2
- 3
消费者
- 1
- 2
二、正常请求测试
1、Producer:
数据量:230万条记录
每次打包发送1000条数据
数据格式:采用压缩格式
测试结果
最大处理量:39.2501MB/S
TPS:41156.6817条
2、Consumer
耗时:18秒
总体文件大小:2193.45MB
最大处理量:163.6659MB/S
TPS:171616.1767条
三、压力请求测试
1、Producer
数据量:1000万条数据
每次打包发送1000条数据
数据格式:采用压缩格式
测试结果
耗时:242秒
总体文件大小:9536.74MB
最大处理量:39.2531MB/S
TPS:41159.8856条
2、Consumer
耗时:70秒
总体文件大小:9536.74MB
最大处理量:145.4193MB/S
TPS:152483.1887条
结论:1000万条下的压力测试,性能有所降低,估计瓶颈期在500万条左右
阅读全文
0 0
- Kafka性能测试分析
- Kafka性能测试分析
- kafka 性能测试
- kafka性能测试
- kafka 10 性能测试
- 七. kafka性能测试
- kafka的性能测试
- Kafka性能测试方法
- kafka性能基准测试
- kafka性能测试
- kafka性能测试的,jmap内存堆分析
- kafka性能分析
- Kafka性能测试与详解
- kafka 单机读写性能测试
- apache kafka性能测试命令使用和构建kafka-perf
- apache kafka性能测试命令使用和构建kafka-perf
- kafka数据保存时间问题与kafka的性能测试
- apache kafka性能测试命令使用和构建kafka-perf
- [Hackerrank 101 Hack 43&& MenciOJ P321] K-Inversion Permutations
- metasploitable2 中mutillidae(owasp10)报错数据库不存在的问题
- 【面试题】剑指offer11--求一个数的指数次方,模拟实现一个pow函数
- Linux查看CPU和内存使用情况
- WebView使用解析(二)之WebViewClient/WebChromeClient
- Kafka性能测试分析
- 两张二维人物图像互相换脸代码
- Kotlin开发之旅《二》—Kotlin的基本语法
- SQL Server
- BZOJ 2466: [中山市选2009]树 高斯消元
- PHP中的魔术常量、预定义常量和预定义变量
- Python3处理HTTP请求
- 常用排序算法小结
- Excel VBA高效办公应用-第七章-VBA财务报表分析-Part1 (损益表的分析)