如何严谨地做性能测试
来源:互联网 发布:电信cdma是什么网络 编辑:程序博客网 时间:2024/05/02 21:21
如何严谨地做性能测试 From http://coolshell.cn/articles/17381.html
一般来说,性能测试要统一考虑这么几个因素:Thoughput吞吐量,Latency响应时间,资源利用(CPU/MEM/IO/Bandwidth…),成功率,系统稳定性。
下面的这些性能测试的方式基本上来源自我的老老东家汤森路透,一家做real-time的金融数据系统的公司。
一,你得定义一个系统的响应时间latency,建议是TP99,以及成功率。比如路透的定义:99.9%的响应时间必需在1ms之内,平均响应时间在1ms以内,100%的请求成功。
二,在这个响应时间的限制下,找到最高的吞吐量。测试用的数据,需要有大中小各种尺寸的数据,并可以混合。最好使用生产线上的测试数据。
三,在这个吞吐量做Soak Test,比如:使用第二步测试得到的吞吐量连续7天的不间断的压测系统。然后收集CPU,内存,硬盘/网络IO,等指标,查看系统是否稳定,比如,CPU是平稳的,内存使用也是平稳的。那么,这个值就是系统的性能
四,找到系统的极限值。比如:在成功率100%的情况下(不考虑响应时间的长短),系统能坚持10分钟的吞吐量。
五,做Burst Test。用第二步得到的吞吐量执行5分钟,然后在第四步得到的极限值执行1分钟,再回到第二步的吞吐量执行5钟,再到第四步的权限值执行1分钟,如此往复个一段时间,比如2天。收集系统数据:CPU、内存、硬盘/网络IO等,观察他们的曲线,以及相应的响应时间,确保系统是稳定的。
六、低吞吐量和网络小包的测试。有时候,在低吞吐量的时候,可能会导致latency上升,比如TCP_NODELAY的参数没有开启会导致latency上升(详见TCP的那些事),而网络小包会导致带宽用不满也会导致性能上不去,所以,性能测试还需要根据实际情况有选择的测试一下这两咱场景。
(注:在路透,路透会用第二步得到的吞吐量乘以66.7%来做为系统的软报警线,80%做为系统的硬报警线,而极限值仅仅用来扛突发的peak)
- 如何严谨地做性能测试
- 如何做性能测试?
- 如何做性能测试
- 如何做LINPACK测试及性能优化
- 如何更好地进行性能测试需求分析
- 你的网站为什么不受欢迎?全方位性能测试如何做
- 你的网站为什么不受欢迎?全方位性能测试如何做
- 如何做性能优化?
- 使用junitperf做性能测试
- 为什么要做性能测试?
- Jmeter做接口性能测试
- 性能测试应该怎么做?
- 性能测试应该怎么做?
- 我怎么做性能测试
- 性能测试应该怎么做?
- 用c++做性能测试
- 性能测试应该怎么做?
- 如何做测试?
- COGS 2105. [NOIP2015] 信息传递 法一 解题报告
- jQuery Mobile 网格
- Milk
- 深入理解View(一):从setContentView谈起
- Codeforces Round #305 (Div. 2) D 栈
- 如何严谨地做性能测试
- 高精度模板
- Matlab 取整函数
- logging模块
- boost 时间与日期处理
- 野指针的定义和避免
- Facebook rebound库编译之后,安装时出现的bug
- POJ2828 Buy Tickets(线段树)
- HDU-5724 Chess(Nim)