MySQL 性能分析之慢查询日志、日志分析工具

管理员
管理员 2022-2-7

查询优化分析过程

=========分析==========

1.观察,至少跑1天,看看生产的慢SQL情况。

2.开启慢查询日志,设置阈值,比如超过5秒钟的就是慢SQL, 并将它抓取出来。

3.explain+慢SQL分析

4.show profile

5.运维经理orDBA,进行SQL数据库服务器的参数调优。


==========总结==========

1.慢查询的开启并捕获

2.explain+慢SQL分析

3.showprofile查询SQL在Mysql服务器里面的执行细节和生命周期情况

4.SQL数据库服务器的参数调优。


查询优化

永远小表驱动大表。


order by关键字优化

ORDER BY子句,尽量使用 Index 方式排序,避免使用 filesort 方式排序


尽可能在索引列上完成排序操作,遵照索引建的最佳左前缀


MySQL支持二种方式的排序,filesort 和 Index, Index效率高。 它指MySQL扫描索引本身完成排序。FileSort方式效率较低。

ORDER BY满足两情况,会使用Index方式排序

ORDER BY语句使用索引最左前列

使用where子句与OrderBy子句条件列组合满足索引最左前列

如果不在索引列上,filesort有两种算法:mysql就要启动双路排序和单路排序


group by关键字优化

groupby实质是先排序后进行分组,遵照索引建的最佳左前缀

当无法使用索引列,增大max_length_for_sort_data参数的设置+增大sort_buffer_size参数的设置


where高于having,能写在where限定的条件就不要去having限定了。


慢查询日志

MySQL的慢查询日志是MySQL提供的一种日志记录,它用来记录在MySQL中响应时间超过阀值的语句,具体指运行时间超过long_query_ftime值 的SQL,则会被记录到慢查询日志中。


具体指运行时间超过long_query_time值的SQL,则会被记录到慢查询志中。long_query_time的默认值为10,意思是运行10秒以_上的语句。


由他来查看哪些SQL超出了我们的最大忍耐时间值,比如一条sql执行超过5秒钟,我们就算慢SQL,希望能收集超过5秒的sq|,结合之前explain进行全面分析。


使用方法

默认情况下,MySQL数据库没有开启慢查询日志,需要我们手动来设置这个参数。


当然,如果不是调优需要的话,一般不建议启动该参数,因为开启慢查询日志会或多或少带来一定的性能影响。慢查询日志支持将日志记录写入文件


查看是否开启


show VARIABLES LIKE '%slow_query_log%';


默认情况下slow_query_log的值为OFF,表示慢查询日志是禁用的,可以通过设置slow_query_log的值来开启。


开启


使用set global slow_query_log=1开启了慢查询日志只对当前数据库生效,如果MySQL重启后则会失效。


如果要永久生效,就必须修改配置文件my.cnf (其它系统变量也是如此) 修改my.cnf文件,[mysqld]下 增加或修改参数 slow_query_log和slow_query_log_file后, 然后重启MySQL服务器。也即将如下两行配置进my.cnf文件


slow_query_log=1

slow_query_log_file=/arlib/mysq/localhost-slow.log

关于慢查询的参数slow_ query_log_file ,它指定慢查询日志文件的存放路径,系统默认会给-一个缺省的文件host_name-slow.log (如果没有指定参数slow_ query_log_file的话)


开启慢查询日志后,什么样的SQL参会记录到慢查询里面?


这个是由参数long_query_time控制,默认情况下long_query_time的值为10秒, 命令


 SHOW VARIABLES LIKE 'long_query_time%';

 可以使用命令修改,也可以在my.cnf参数里面修改。 假如运行时间正好等于long_query_time的情况, 并不会被记录下来。也就是说,在mysql源码里是判断大于long_query_time; 而非大于等于。


设置慢查询阈值

set global long_query_time = n;

模拟产生慢查询

select sleep(4);

查询系统慢查询数量

show global status like '%Slow_queries%';

查询系统慢查询数量

show global status like '%Slow_queries%';


日志分析工具

在生产环境中,如果要手工分析日志,查找、分析SQL,显然是个体力活,MySQL提供了日志分析工具mysqldumpslow。

mysqldumpslow --help


s:是表示按何种方式排序

c:访问次数

l:锁定时间

r:返回记录

t:查询时间

al:平均锁定时间

ar:平均返回记录数

at:平均查询时间

t:即为返回前面多少条的数据

g:后边搭配一个正则匹配模式,大小写不敏感的


常用方式

# 得到返回记录集最多的10个SQL

mysqldumpslow -s r -t 10 /var/lib/mysql/localhost-slow.log

# 得到访问次数最多的10个SQL

mysqldumpslow -s C -t 10 /var/lib/mysql/localhost-slow.log

# 得到按照时间排序的前10条里面含有左连接的查询语句

mysqldumpslow -s t -t 10 -g "left join" /var/lib/mysql/localhost-slow.log

# 另外建议在使用这些命令时结合|和more使用,否则有可能出现爆屏情况

mysqldumpslow -s r -t 10 /var/lib/mysql/localhost-slow.log | more



回帖
  • 消灭零回复

微信二维码

微信二维码

微信扫码添加微信好友