文章详情

短信预约-IT技能 免费直播动态提醒

请输入下面的图形验证码

提交验证

短信预约提醒成功

MySQL怎么快速定位慢SQL

2023-06-29 14:29

关注

本文小编为大家详细介绍“MySQL怎么快速定位慢SQL”,内容详细,步骤清晰,细节处理妥当,希望这篇“MySQL怎么快速定位慢SQL”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一起来学习新知识吧。

开启慢查询日志

在项目中我们会经常遇到慢查询,当我们遇到慢查询的时候一般都要开启慢查询日志,并且分析慢查询日志,找到慢sql,然后用explain来分析

系统变量

MySQL和慢查询相关的系统变量如下

参数含义
slow_query_log是否启用慢查询日志, ON为启用,OFF为没有启用,默认为OFF
log_output日志输出位置,默认为FILE,即保存为文件,若设置为TABLE,则将日志记录到mysql.show_log表中,支持设置多种格式
slow_query_log_file指定慢查询日志文件的路径和名字
long_query_time执行时间超过该值才记录到慢查询日志,单位为秒,默认为10

执行如下语句看是否启用慢查询日志,ON为启用,OFF为没有启用

show variables like "%slow_query_log%"

MySQL怎么快速定位慢SQL

可以看到我的没有启用,可以通过如下两种方式开启慢查询

修改配置文件

修改配置文件my.ini,在[mysqld]段落中加入如下参数

[mysqld]log_output='FILE,TABLE'slow_query_log='ON'long_query_time=0.001

需要重启 MySQL 才可以生效,命令为 service mysqld restart

设置全局变量

我在命令行中执行如下2句打开慢查询日志,设置超时时间为0.001s,并且将日志记录到文件以及mysql.slow_log表中

set global slow_query_log = on;set global log_output = 'FILE,TABLE';set global long_query_time = 0.001;

想要永久生效得到配置文件中配置,否则数据库重启后,这些配置失效

分析慢查询日志

因为mysql慢查询日志相当于是一个流水账,并没有汇总统计的功能,所以我们需要用一些工具来分析一下

mysqldumpslow

mysql内置了mysqldumpslow这个工具来帮我们分析慢查询日志。

MySQL怎么快速定位慢SQL

常见用法

# 取出使用最多的10条慢查询mysqldumpslow -s c -t 10 /var/run/mysqld/mysqld-slow.log# 取出查询时间最慢的3条慢查询mysqldumpslow -s t -t 3 /var/run/mysqld/mysqld-slow.log # 得到按照时间排序的前10条里面含有左连接的查询语句mysqldumpslow -s t -t 10 -g “left join” /database/mysql/slow-log

pt-query-digest

pt-query-digest是我用的最多的一个工具,功能非常强大,可以分析binlog、General log、slowlog,也可以通过show processlist或者通过tcpdump抓取的MySQL协议数据来进行分析。pt-query-digest是一个perl脚本,只需下载并赋权即可执行

下载和赋权

wget www.percona.com/get/pt-query-digestchmod u+x pt-query-digestln -s /opt/soft/pt-query-digest /usr/bin/pt-query-digest

用法介绍

// 查看具体使用方法 pt-query-digest --help// 使用格式pt-query-digest [OPTIONS] [FILES] [DSN]

常用OPTIONS

常用DSN

A    指定字符集
D    指定连接的数据库
P    连接数据库端口
S    连接Socket file
h    连接数据库主机名
p    连接数据库的密码
t    使用--review或--history时把数据存储到哪张表里
u    连接数据库用户名

DSN使用key=value的形式配置;多个DSN使用,分隔

使用示例

# 展示slow.log中最慢的查询的报表pt-query-digest slow.log# 分析最近12小时内的查询pt-query-digest --since=12h slow.log# 分析指定范围内的查询pt-query-digest slow.log --since '2020-06-20 00:00:00' --until '2020-06-25 00:00:00'# 把slow.log中查询保存到query_history表pt-query-digest --user=root --password=root123 --review h=localhost,D=test,t=query_history --create-review-table slow.log# 连上localhost,并读取processlist,输出到slowlogpt-query-digest --processlist h=localhost --user=root --password=root123 --interval=0.01 --output slowlog# 利用tcpdump获取MySQL协议数据,然后产生最慢查询的报表# tcpdump使用说明:https://blog.csdn.net/chinaltx/article/details/87469933tcpdump -s 65535 -x -nn -q -tttt -i any -c 1000 port 3306 > mysql.tcp.txtpt-query-digest --type tcpdump mysql.tcp.txt# 分析binlogmysqlbinlog mysql-bin.000093 > mysql-bin000093.sqlpt-query-digest  --type=binlog mysql-bin000093.sql# 分析general logpt-query-digest  --type=genlog  localhost.log

用法实战

编写存储过程批量造数据

在实际工作中没有测试性能,我们经常需要改造大批量的数据,手动插入是不太可能的,这时候就得用到存储过程了

CREATE TABLE `kf_user_info` (  `id` int(11) NOT NULL COMMENT '用户id',  `gid` int(11) NOT NULL COMMENT '客服组id',  `name` varchar(25) NOT NULL COMMENT '客服名字') ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT='客户信息表';

如何定义一个存储过程呢?

CREATE PROCEDURE 存储过程名称 ([参数列表])BEGIN    需要执行的语句END

举个例子,插入id为1-100000的100000条数据

用Navicat执行

-- 删除之前定义的DROP PROCEDURE IF EXISTS create_kf;-- 开始定义CREATE PROCEDURE create_kf(IN loop_times INT) BEGINDECLARE var INT;SET var = 1;WHILE var < loop_times DO    INSERT INTO kf_user_info (`id`,`gid`,`name`) VALUES (var, 1000, var);SET var = var + 1;END WHILE; END;-- 调用call create_kf(100000);

存储过程的三种参数类型

参数类型是否返回作用
IN向存储过程传入参数,存储过程中修改该参数的值,不能被返回
OUT把存储过程计算的结果放到该参数中,调用者可以得到返回值
INOUTIN和OUT的结合,即用于存储过程的传入参数,同时又可以把计算结构放到参数中,调用者可以得到返回值

用MySQL执行

得用DELIMITER 定义新的结束符,因为默认情况下SQL采用(;)作为结束符,这样当存储过程中的每一句SQL结束之后,采用(;)作为结束符,就相当于告诉MySQL可以执行这一句了。但是存储过程是一个整体,我们不希望SQL逐条执行,而是采用存储过程整段执行的方式,因此我们就需要定义新的DELIMITER ,新的结束符可以用(//)或者($$)

因为上面的代码应该就改为如下这种方式

DELIMITER //CREATE PROCEDURE create_kf_kfGroup(IN loop_times INT)  BEGIN  DECLARE var INT;SET var = 1;WHILE var <= loop_times DO    INSERT INTO kf_user_info (`id`,`gid`,`name`) VALUES (var, 1000, var);SET var = var + 1;END WHILE;  END //DELIMITER ;

查询已经定义的存储过程

show procedure status;

开始执行慢sql

select * from kf_user_info where id = 9999;select * from kf_user_info where id = 99999;update kf_user_info set gid = 2000 where id = 8888;update kf_user_info set gid = 2000 where id = 88888;

可以执行如下sql查看慢sql的相关信息。

SELECT * FROM mysql.slow_log order by start_time desc;

查看一下慢日志存储位置

show variables like "slow_query_log_file"
pt-query-digest /var/lib/mysql/VM-0-14-centos-slow.log

执行后的文件如下

MySQL怎么快速定位慢SQL

# Profile# Rank Query ID                            Response time Calls R/Call V/M # ==== =================================== ============= ===== ====== ====#    1 0xE2566F6154AFF41948FE497E53631B43   0.1480 56.1%     4 0.0370  0.00 UPDATE kf_user_info#    2 0x2DFBC6DBF0D68EF2EC2AE954DC37A1A4   0.1109 42.1%     4 0.0277  0.00 SELECT kf_user_info# MISC 0xMISC                               0.0047  1.8%     2 0.0024   0.0 <2 ITEMS>

从最上面的统计sql中就可以看到执行慢的sql

可以看到响应时间,执行次数,每次执行耗时(单位秒),执行的sql

下面就是各个慢sql的详细分析,比如,执行时间,获取锁的时间,执行时间分布,所在的表等信息

不由得感叹一声,真是神器,查看慢sql超级方便

最后说一个我遇到的一个有意思的问题,有一段时间线上的接口特别慢,但是我查日志发现sql执行的很快,难道是网络的问题?

为了确定是否是网络的问题,我就用拦截器看了一下接口的执行时间,发现耗时很长,考虑到方法加了事务,难道是事务提交很慢?

于是我用pt-query-digest统计了一下1分钟左右的慢日志,发现事务提交的次很多,但是每次提交事务的平均时长是1.4s左右,果然是事务提交很慢。

MySQL怎么快速定位慢SQL

读到这里,这篇“MySQL怎么快速定位慢SQL”文章已经介绍完毕,想要掌握这篇文章的知识点还需要大家自己动手实践使用过才能领会,如果想了解更多相关内容的文章,欢迎关注编程网行业资讯频道。

阅读原文内容投诉

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

软考中级精品资料免费领

  • 历年真题答案解析
  • 备考技巧名师总结
  • 高频考点精准押题
  • 2024年上半年信息系统项目管理师第二批次真题及答案解析(完整版)

    难度     813人已做
    查看
  • 【考后总结】2024年5月26日信息系统项目管理师第2批次考情分析

    难度     354人已做
    查看
  • 【考后总结】2024年5月25日信息系统项目管理师第1批次考情分析

    难度     318人已做
    查看
  • 2024年上半年软考高项第一、二批次真题考点汇总(完整版)

    难度     435人已做
    查看
  • 2024年上半年系统架构设计师考试综合知识真题

    难度     224人已做
    查看

相关文章

发现更多好内容

猜你喜欢

AI推送时光机
位置:首页-资讯-数据库
咦!没有更多了?去看看其它编程学习网 内容吧
首页课程
资料下载
问答资讯