一、应用场景
1、对新的或调整后的数据库服务器进行测试,验证或比较配置结果;
2、建立Mysql服务器的性能基准线,即得到健康环境下的指标,协助后续实际使用中的监控、优化;
3、模拟多用户并发访问MySQL来进行压力测试,找出系统的扩张瓶颈,增加数据库的并发,观察QPS、TPS变化,确定并发量与性能最优的关系;
4、对比多个存储引擎(MyISAM,InnoDB等)在相同环境下的相同并发压力下的性能差别。
二、测试计划
1、确定测试工具,根据测试目标和业务制定测试计划、测试场景、测试命令;
2、使用生产环境的数据库备份,根据测试用例进行测试;
3、分析测试结果。
三、简介mysqlslap
mysqlslap是版本高于5.1的mysql自带的工具。
【参数说明】
-a
//若命令中没通过语句或文件提供SQL表和数据,则将自动创建SQL表和数据
–auto-generate-sql-add-autoincrement
//给自动创建的表添加一个auto_increment列
–auto-generate-sql-execute-number=N
//对每个模拟用户的自动生成N次查询
–auto-generate-sql-guid-primary
//给自动创建的表添加基于GUID的主键
–auto-generate-sql-load-type=name
//指定测试语句类型:mixed(查询与插入对半),update(更新主键),write(插入),key(读主键)或read(查询),默认为mixed
–auto-generate-sql-secondary-indexes=N
//给自动创建的表增加N个二级索引,默认为0
–auto-generate-sql-unique-query-number=N
//指定自动创建的表中不同查询的数量
–auto-generate-sql-unique-write-number=N
//指定自动创建的表中不同插入的数量
–auto-generate-sql-write-number=N
//自动创建的表中,对每个线程插入N行数据(默认N为100)
–commit=N
//每N条DML提交一次(即一次事务)
-C,–compress
//若server和client的协议都支持压缩,则压缩信息后传送
-c N,–concurrency-name
/模拟N个用户并发执行查询
–create=”字符串或.sql文件路径”
//指定用来创建表的字符串或 .sql文件
–create-schema=”数据库名”
指定测试用的数据库(mysql中的database就是schema)
-#,–debug
–debug-check
-T,–debug-info //输出CPU以及内存的相关信息
【遇到 [Error]mysqlslap:option ‘…’ used,but is disabled,暂时无法解决】
-F,–delimiter=name
此参数指定的值作为sql语句中使用的分隔符
–detach=N
每执行完N条请求,就断开重连一次
-e,–engine=name
指定测试表使用的存储引擎
-h,–host=name
连接指定host
-i,–iterations=N
指定测试迭代次数
-x,–number-char-cols=N
指定自动创建的表中含N个char类型的字段,默认值为1
-y,–number-int-cols=N
指定自动创建的表中含N个int类型的字段,默认值为1
–number-of-queries=N
生成N次总查询(平均每个用户查询次数=总查询次数/并发数)
–only-print
不实际执行,打印模拟执行的过程
-u,–user=name
连接server用的用户名
-p,–password[=name]
连接server用的密码,参数与值之间没有空格,如-p123
-P,–port=端口号
指定连接server的端口
–post(/pre)-query=name
指定测试完成后(/前)执行的含sql语句的字符串或.sql文件
–post(/pre)-system=name
指定测试完成后(/前)执行的系统语句
–protocol=name
指定用来连接的协议:tcp,socket,pipe,memory
-q “查询语句或包含查询语句的sql文件”,–query=”查询语句或包含查询语句的sql文件”
自定义要运行的查询语句
–defaults-file=”配置文件路径”
指定.cnf配置文件
【注意】
不用-a自动生成数据表或自定义指定,就会报1049 error;
命令行中,参数–number-of-queries=N(N为总查询次数)和–auto-generate-sql-execute-number=N(N为每个并发的查询次数)只能存在1个。
四、测试执行:一些栗子
1)自动生成复杂表;并分别模拟50和100个用户,对每个用户自动生成5次查询,迭代测试10次:
mysqlslap -uroot -proot -a --auto-generate-sql-add-increment --auto-generate-sql-load-type=mixed --number-int-cols=5 --number-char-cols=20 -e innodb -c 50,100 --auto-generate-sql-execute-number=5 i 10
2)指定数据库‘test’,自定义sql语句,模拟50个并发用户进行测试:
mysqlslap -uroot -proot -c 50 --create-schema=test -q "select * from table1;"
3)
//将创建表和数据的sql语句写入一个.sql文件,之后在测试中使用
echo "多个sql语句(创建多个表,插入数据)" > 文件路径(如 路径/schema.sql)
//将查询语句写入一个.sql文件,之后以在测试中使用
echo "多个sql查询语句(如 select * from table1;select * from table2;...)" > 文件路径(如c:/users/administrator/desktop/select_query.sql)
//从指定的.sql文件中加载sql语句进行测试
mysqlslap -uroot -proot -c 50 --number-of-queries=100 --create="路径/schema.sql" -q "c:/users/administrator/desktop/select_query.sql" --delimiter=";"
ps:
进行mysql基准测试前,可考虑其他方面的优化,如利用redis集群来前置缓存,通过读写分离、分库分表来减轻数据库压力等。
性能优化的一些资料:
mysql性能优化
mysql性能优化小结
本文亦有参考网络资料,感谢!