Mysql基准测试mysqlslap、sysbench

什么是基准测试

定义：基准测试是一种测量和评估软件性能指标的活动用于建立某个时刻的性能基准，以便当系统发生软硬件变化时重新进行基准测试以评估变化对性能的影响。理解为基准测试是针对系统设置的一种压力测试，基准测试与压力测试还是有区别的，基准测试，是直接、简单、易于比较，用于评估服务器的处理能力，测试数据是由工具生成的，压力测试

对真实的业务数据进行测试，获得真实系统所承受的压力，基准测试是一种简化的压力测试。

压力测试需要针对不同主题，所使用的数据和查询也是真实用到的，基准测试不关心业务逻辑，所使用的查询和业务的真实性可以和业务环境没有关系。

基准测试的目的

1、建立mysql服务器的性能基准线

2、模拟比当前系统更高的负载，以找出系统的扩展瓶颈，增加数据库并发，观察qps，tps变化，确定并发量和性能最优的关系。

3、测试不同硬件、软件和操作系统配置

4、证明新 的硬件设备是否配置正确

如何进行基准测试

对整个系统进行基准测试

从系统入口进行测试（如网站web前端、手机app前端）

优点：能够测试整个系统的性能，包括web服务器、程序代码、网络、缓存、数据库等

能反应出系统中各个组建接口间的性能问题，体现真实性能状况

缺点：测试设计复杂、消耗时间长

单独对组件进行测试，对mysql进行基准测试

优点：测试设计简单，所需好费时间短

缺点：无法全面了解整个系统的性能基线

mysql基准测试的常见指标

单位时间内处理的事物数 tps 

单位时间内所处理的查询数 qps

响应时间，平均响应时间、最小响应时间、最大响应时间、各时间所占百分比。

并发请求的数量，同时处理的查询请求的数量， 而不是有多少链接的线程。

 

基准测试的步骤

计划和设计基准测试：准备基准测试及测试收集脚本，cpu使用率、IO、网络流量、状态与计数器信息等

收集脚本：   

运行基准测试：

保存及分析基准测试结果：脚本

是对整个系统还是某一个组件

使用什么样的数据

基准测试中容易忽略的问题，

1、使用生产环境数据时只使用了部分数据，推荐使用生产环境的数据库备份

2、在多用户场景中，只做单用户的测试，是不全面的，对多用户场景使用多线程并发测试

3、在单服务器上测试分布式应用，在生产环境的时候数据库是主从架构，在基准测试的时候也要相同的架构进行测试， 

4、在测试中反复执行同一查询，容易在缓存中命中，无法反应真是查询性能。

基准测试工具，

mysqlslap   下载及安装 ，mysql服务器自带的基准测试工具，随mysql一起安装

特点 ：可以模拟服务器负载，并输出相关统计信息

            可以指定也可以自动生成查询语句 

常用参数说明

--auto-generate-sql 由系统自动生成sql脚本进行测试

--auto-generate-sql-add-autoincrement在生成的表中增加自增ID，

--auto-generate-load-type指定测试中使用的查询类型

--auto-generate-sql-write-number指定初始化数据时生成的数据量

--concurrency指定并发线程的数量

--engine 指定要测试表的存储引擎，可以用逗号分割多个存储引擎

--no-drop指定不清理测试数据

--iterations指定测试运行的次数

--number-of-queries指定每一个线程执行的查询数量

--debug-info指定输出额外的内存及cpu统计信息

--number-int-cols 指定测试表中包含的INT类型列的数量

--number-char-cols指定测试表中包含的varchar类型的数量

--create-schema指定了用于执行测试的数据库的名字

--query用于指定自定义sql的脚本

--only-print并不运行测试脚本，而是把生成的脚本打印出来

使用方式

mysqlslap --concurrency=1,50,100,200 --iterations=3 --number-int-cols=5 --number-char-cols=5 --auto-generate-sql --auto-generate-sql-add-autoincrement --engine=myisam,innodb --number-of-queries=10 --create-schema=test

mysql基准测试工具之 sysbench

对io cpu 内存  都可以测试，

安装方法

wget https://github.com/akopytov/sysbench/archive/0.5.zip

unzip  0.5.zip

./autogen.sh

yum install automake

yum install libtool

./configure --with-mysql-includes=/usr/local/mysql/include/ --with-mysql-libs=/usr/local/mysql/lib

make 

make install 

安装完成，常用参数

--test用于指定所要执行的测试类型，支持一下参数  Fileio文件系统I/O性能测试，cpu性能测试、memory 内存性能测试  Oltp测试要指定具体的lua脚本

--mysql-db 用于指定执行基准测试的数据库名

--mysql-table-engine用于指定所使用的存储引擎

--oltp-tables-count执行测试的表的数量

--oltp-tables-size指定每个表中的数据行数

--num-threads指定测试的并发线程数量

--max-time 指定最大的测试时间

--report-interval 指定间隔多长时间输出一次统计信息

--mysql-user 指定执行测试的mysql用户

--mysql-password指定执行测试的mysql用户的密码

prepare 用于准备测试数据

run用于实际进行测试

cleanup 用于清理测试数据

使用方式

sysbench --test=cpu --cpu-max-prime=10000 run

free -m 查看系统内存量

df -lh 查看磁盘容量

sysbench --test=fileio-total-size=1G prepare

sysbench --test=fileio --num-threads=8 --init-rng=on --file-total-size=1G --file-test-mode=rndrw --report-interval=1 run