general_log统计与优化:
来源:互联网 发布:邓肯体测数据 编辑:程序博客网 时间:2024/06/06 00:24
general统计与优化:
1,开始日志双模式:
show variables like 'log_output'; #记录以前的日志格式,便于恢复。
set global log_output='TABLE,FILE,NONE'; #增加table模式,开始统计。
2,开启general_log日志:
set global general_log=on;
建议开启zabbix监控和自动关闭的触发功能,防止意外情况忘记关闭该参数。
3,关闭日志,恢复状态:
开启一段时间后关闭:
set global general log=off;
set global log_output='FILE'
4,统计数据:
将表的数据导入新表(因为csv引擎大小写敏感):
1,使用
use tmp;
2,建表
CREATE TABLE tmp.general_log SELECT * FROM mysql.general_log;
3,alter table tmp.general_log change argument argument varchar(2500); #blob不支持大小写转换,需要换成varchar。
4,update tmp.general_log set argument=lower(argument);
临时表的方法(退出后会清空):
1,use tmp;
2,CREATE TEMPORARY TABLE tmp_table SELECT * FROM mysql.general_log;
3,alter table tmp_table change argument argument varchar(2500);
4,update tmp_table set argument=lower(argument);
5,统计数据:
查总数:select count(1) from tmp.general_log;
select * from tmp.general_log where argument like 'rollback'; #30
查询非增删改查的操作数:
select count(1) number ,argument from (
select * from tmp.general_log where lower(argument) not like 'select%' and lower(argument) not like 'insert%' and lower(argument) not like 'update%' and lower(argument) not like 'delete%' ) not_iuds group by argument order by number desc ;
select查询进行排序:
select count(1) count ,argument from (
select replace(replace(replace(replace(replace(replace(replace(replace(replace(replace(argument,"1",'N'),'2','N'),'3','N'),'4','N'),'5','N'),'6','N'),'7','N'),'8','N'),'9','N'),'0','N') argument from tmp.general_log where argument like 'select%' and event_time = '2017-05-03 10:00:56.762357'
) t group by argument order by count desc ;
update查询进行排序:
select count(1) count ,argument from (
select replace(replace(replace(replace(replace(replace(replace(replace(replace(replace(argument,"1",'N'),'2','N'),'3','N'),'4','N'),'5','N'),'6','N'),'7','N'),'8','N'),'9','N'),'0','N') argument from tmp.general_log where argument like 'update%' and event_time = '2017-05-03 10:00:56.762357'
) t group by argument order by count desc ;
insert查询进行排序:
select count(1) count ,argument from (
select replace(replace(replace(replace(replace(replace(replace(replace(replace(replace(argument,"1",'N'),'2','N'),'3','N'),'4','N'),'5','N'),'6','N'),'7','N'),'8','N'),'9','N'),'0','N') argument from tmp.general_log where argument like 'insert%' and event_time = '2017-05-03 10:00:56.762357'
) t group by argument order by count desc ;
delete查询进行排序:
select count(1) count ,argument from (
select replace(replace(replace(replace(replace(replace(replace(replace(replace(replace(argument,"1",'N'),'2','N'),'3','N'),'4','N'),'5','N'),'6','N'),'7','N'),'8','N'),'9','N'),'0','N') argument from tmp.general_log where argument like 'delete%' and event_time = '2017-05-03 10:00:56.762357'
) t group by argument order by count desc ;
6,通过navicat进行表查询。
select * from information_schema.`TABLES` where TABLE_NAME = 'dbversion'; #查看dbversion是否是目标数据的查询。
7,分析语意,必要时和开发人员沟通具体原因。
如有必要,可以添加索引进行优化。
1,开始日志双模式:
show variables like 'log_output'; #记录以前的日志格式,便于恢复。
set global log_output='TABLE,FILE,NONE'; #增加table模式,开始统计。
2,开启general_log日志:
set global general_log=on;
建议开启zabbix监控和自动关闭的触发功能,防止意外情况忘记关闭该参数。
3,关闭日志,恢复状态:
开启一段时间后关闭:
set global general log=off;
set global log_output='FILE'
4,统计数据:
将表的数据导入新表(因为csv引擎大小写敏感):
1,使用
use tmp;
2,建表
CREATE TABLE tmp.general_log SELECT * FROM mysql.general_log;
3,alter table tmp.general_log change argument argument varchar(2500); #blob不支持大小写转换,需要换成varchar。
4,update tmp.general_log set argument=lower(argument);
临时表的方法(退出后会清空):
1,use tmp;
2,CREATE TEMPORARY TABLE tmp_table SELECT * FROM mysql.general_log;
3,alter table tmp_table change argument argument varchar(2500);
4,update tmp_table set argument=lower(argument);
5,统计数据:
查总数:select count(1) from tmp.general_log;
select * from tmp.general_log where argument like 'rollback'; #30
查询非增删改查的操作数:
select count(1) number ,argument from (
select * from tmp.general_log where lower(argument) not like 'select%' and lower(argument) not like 'insert%' and lower(argument) not like 'update%' and lower(argument) not like 'delete%' ) not_iuds group by argument order by number desc ;
select查询进行排序:
select count(1) count ,argument from (
select replace(replace(replace(replace(replace(replace(replace(replace(replace(replace(argument,"1",'N'),'2','N'),'3','N'),'4','N'),'5','N'),'6','N'),'7','N'),'8','N'),'9','N'),'0','N') argument from tmp.general_log where argument like 'select%' and event_time = '2017-05-03 10:00:56.762357'
) t group by argument order by count desc ;
update查询进行排序:
select count(1) count ,argument from (
select replace(replace(replace(replace(replace(replace(replace(replace(replace(replace(argument,"1",'N'),'2','N'),'3','N'),'4','N'),'5','N'),'6','N'),'7','N'),'8','N'),'9','N'),'0','N') argument from tmp.general_log where argument like 'update%' and event_time = '2017-05-03 10:00:56.762357'
) t group by argument order by count desc ;
insert查询进行排序:
select count(1) count ,argument from (
select replace(replace(replace(replace(replace(replace(replace(replace(replace(replace(argument,"1",'N'),'2','N'),'3','N'),'4','N'),'5','N'),'6','N'),'7','N'),'8','N'),'9','N'),'0','N') argument from tmp.general_log where argument like 'insert%' and event_time = '2017-05-03 10:00:56.762357'
) t group by argument order by count desc ;
delete查询进行排序:
select count(1) count ,argument from (
select replace(replace(replace(replace(replace(replace(replace(replace(replace(replace(argument,"1",'N'),'2','N'),'3','N'),'4','N'),'5','N'),'6','N'),'7','N'),'8','N'),'9','N'),'0','N') argument from tmp.general_log where argument like 'delete%' and event_time = '2017-05-03 10:00:56.762357'
) t group by argument order by count desc ;
6,通过navicat进行表查询。
select * from information_schema.`TABLES` where TABLE_NAME = 'dbversion'; #查看dbversion是否是目标数据的查询。
7,分析语意,必要时和开发人员沟通具体原因。
如有必要,可以添加索引进行优化。
0 0
- general_log统计与优化:
- MySQL general_log优化性能
- 数据库性能优化、统计信息与对象统计信息概述收集、扩展统计信息、dbms_stats.get_prefs
- mysql general_log ON
- mysql general_log评测
- MySQL开启general_log
- mysql打开general_log
- MySQL开启general_log跟踪数据
- mysql general_log表添加索引
- 优化程序统计信息
- 统计性能优化思路
- Peacock数据统计优化
- SQL优化:统计信息
- myql 统计优化
- 【CBO】配置查询优化器(参数与统计信息的调整)
- hexo博客的优化与配置——添加统计代码
- 机器学习与智能优化 之 统计学习理论和支持向量机
- Atitit sql计划任务与查询优化器--统计信息模块
- MySQL常用操作笔记[转]
- Swift required
- 阿里云 日志服务 集成
- linux使用命令ll后字段的解释
- TCP/IP的Socket编程
- general_log统计与优化:
- mysql update操作
- spring框架之自动配置
- 20170504@Math类中的方法
- springmvc处理器适配器两种
- 选择技术/插件总结
- (5)hadoop学习——hive是什么?
- Spring Boot中Web应用的统一异常处理
- 多个正则引擎的比较(pcre re2 hyperscan)