Loading [MathJax]/jax/output/CommonHTML/config.js
前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >MySQL慢查询日志分析详解[通俗易懂]

MySQL慢查询日志分析详解[通俗易懂]

作者头像
全栈程序员站长
发布于 2022-11-08 03:12:16
发布于 2022-11-08 03:12:16
1.5K00
代码可运行
举报
运行总次数:0
代码可运行

大家好,又见面了,我是你们的朋友全栈君。

MySQL的慢查询日志是MySQL提供的一种日志记录,它用来记录在MySQL中响应时间超过阀值的语句,具体指运行时间超过long_query_time值的SQL,则会被记录到慢查询日志中。long_query_time的默认值为10,意思是运行10S以上的语句。默认情况下,Mysql数据库并不启动慢查询日志,需要我们手动来设置这个参数,当然,如果不是调优需要的话,一般不建议启动该参数,因为开启慢查询日志会或多或少带来一定的性能影响。慢查询日志支持将日志记录写入文件,也支持将日志记录写入数据库表。

MySQL慢查询定义

分析MySQL语句查询性能的方法除了使用 EXPLAIN 输出执行计划,还可以让MySQL记录下查询超过指定时间的语句,我们将超过指定时间的SQL语句查询称为“慢查询”。

MySQL慢查询的体现

慢查询主要体现在慢上,通常意义上来讲,只要返回时间大于 >1 sec上的查询都可以称为慢查询。慢查询会导致CPU,内存消耗过高。数据库服务器压力陡然过大,那么大部分情况来讲,肯定是由某些慢查询导致的。

mysql慢查询开启

1.查看当前慢查询设置情况

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
#查看慢查询时间,默认10s,建议降到1s或以下
mysql> show variables like "long_query_time";
+-----------------+----------+
| Variable_name   | Value    |
+-----------------+----------+
| long_query_time | 1.000000 |
+-----------------+----------+
1 row in set (0.00 sec)
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
#查看慢查询配置情况,其中,slow_query_log的值是on就是已开启功能了。
mysql> show variables like "%slow%";
+-----------------------------------+----------------------+
| Variable_name                     | Value                |
+-----------------------------------+----------------------+
| log_slow_admin_statements         | OFF                  |
| log_slow_filter                   |                      |
| log_slow_rate_limit               | 1                    |
| log_slow_rate_type                | session              |
| log_slow_slave_statements         | OFF                  |
| log_slow_sp_statements            | ON                   |
| log_slow_verbosity                |                      |
| max_slowlog_files                 | 0                    |
| max_slowlog_size                  | 0                    |
| slow_launch_time                  | 2                    |
| slow_query_log                    | ON                   |
| slow_query_log_always_write_time  | 10.000000            |
| slow_query_log_file               | /tmp/slow_querys.log |
| slow_query_log_use_global_control |                      |
+-----------------------------------+----------------------+
14 rows in set (0.01 sec)

2.如何开启慢查询功能 方法一:在服务器上找到mysql的配置文件my.cnf , 然后再mysqld模块里追加一下内容,这样的好处是会一直生效,不好就是需要重启mysql进程。

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
vim my.cnf
[mysqld]
slow_query_log = ON
#定义慢查询日志的路径
slow_query_log_file = /tmp/slow_querys.log
#定义查过多少秒的查询算是慢查询,我这里定义的是1秒,5.6之后允许设置少于1秒,例如0.1秒
long_query_time = 1
#用来设置是否记录没有使用索引的查询到慢查询记录,默认关闭,看需求开启,会产生很多日志,可动态修改
#log-queries-not-using-indexes
管理指令也会被记录到慢查询。比如OPTIMEZE TABLE, ALTER TABLE,默认关闭,看需求开启,会产生很多日志,可动态修改
#log-slow-admin-statements

然后重启mysql服务器即可,这是通过一下命令看一下慢查询日志的情况:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
tail -f /tmp/slow_querys.log

方法二:通过修改mysql的全局变量来处理,这样做的好处是,不用重启mysql服务器,登陆到mysql上执行一下sql脚本即可,不过重启后就失效了。

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
#开启慢查询功能,1是开启,0是关闭
mysql> set global slow_query_log=1;
#定义查过多少秒的查询算是慢查询,我这里定义的是1秒,5.6之后允许设置少于1秒,例如0.1秒
mysql> set global long_query_time=1;
#定义慢查询日志的路径
mysql> set global slow_query_log_file='/tmp/slow_querys.log';
#关闭功能:set global slow_query_log=0;
然后通过一下命令查看是否成功
mysql> show variables like 'long%'; 
mysql> show variables like 'slow%';
#设置慢查询记录到表中
#set global log_output='TABLE';

特别要注意的是long_query_time的设置,5.6之后支持设置低于0.1秒,所以记录的详细程度,就看你自己的需求,数据库容量比较大的,超过0.1秒还是比较多,所以就变得有点不合理了。

MYSQL慢查询日志的记录定义

直接查看mysql的慢查询日志分析,比如我们可以tail -f slow_query.log查看里面的内容

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
tail -f  slow_query.log
# Time: 110107 16:22:11
# User@Host: root[root] @ localhost []
# Query_time: 9.869362 Lock_time: 0.000035 Rows_sent: 1 Rows_examined: 6261774
SET timestamp=1294388531;
select count(*) from ep_friends;

字段意义解析:

第一行,SQL查询执行的时间 第二行,执行SQL查询的连接信息,用户和连接IP 第三行,记录了一些我们比较有用的信息,如下解析: – Query_time,这条SQL执行的时间,越长则越慢 – Lock_time,在MySQL服务器阶段(不是在存储引擎阶段)等待表锁时间 – Rows_sent,查询返回的行数 – Rows_examined,查询检查的行数,越长就当然越费时间 第四行,设置时间戳,没有实际意义,只是和第一行对应执行时间。 第五行及后面所有行(第二个# Time:之前),执行的sql语句记录信息,因为sql可能会很长。

MYSQL慢查询日志分析方法

虽然慢查询日志已经够清晰,但是往往我们的日志记录到的不是只有一条sql,可能有很多很多条,如果不加以统计,估计要看到猴年马月,这个时候就需要做统计分析了。

方法一:使用mysql程序自带的mysqldumpslow命令分析 例如: mysqldumpslow -s c -t 10 /tmp/slow-log 这会输出记录次数最多的10条SQL语句,得出的结果和上面一般慢查询记录的格式没什么太大差别,这里就不展开来详细解析了。

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
参数解析:
-s:是表示按照何种方式排序,子参数如下:
    c、t、l、r:分别是按照记录次数、时间、查询时间、返回的记录数来排序,
    ac、at、al、ar:表示相应的倒叙;
-t:返回前面多少条的数据,这里意思就是返回10条数据了(也可以说是前十)
-g:后边可以写一个正则匹配模式,大小写不敏感的,比如:
    /path/mysqldumpslow -s r -t 10 /tmp/slow-log,得到返回记录集最多的10个查询。
    /path/mysqldumpslow -s t -t 10 -g “left join” /tmp/slow-log,得到按照时间排序的前10条里面含有左连接的查询语句。

方法二:使用pt(Percona Toolkit)工具的pt-query-digest进行统计分析。 这个是由Percona公司出品的一个用perl编写的脚本,只有安装上pt工具集才会存在,有兴趣的朋友就要先安装pt工具了。直接分析慢查询文件,执行如下:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
pt-query-digest slow_querys.log >t.txt

因为记录里还是可能有很多sql在,看起来还是费劲,所以建议输出到文件来看了,具体不多过多介绍。

参考资料: https://blog.csdn.net/enweitech/article/details/80239189 https://blog.51cto.com/arthur376/1948944

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

发布者:全栈程序员栈长,转载请注明出处:https://javaforall.cn/182868.html原文链接:https://javaforall.cn

【正版授权,激活自己账号】: Jetbrains全家桶Ide使用,1年售后保障,每天仅需1毛

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2022年10月12日,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
ASP.NET实现身份模拟
使用模拟时,ASP.NET 应用程序可以选择以这些应用程序当前正为之操作的客户的身份执行。通常这样做的原因是为了避免在 ASP.NET 应用程序代码中处理身份验证和授权问题。而您依赖于 Microsoft Internet 信息服务 (IIS) 来验证用户,然后将已通过验证的标记传递给 ASP.NET 应用程序;或者,如果无法验证用户,则传递未经身份验证的标记。不论何种情况,如果启用了“模拟”,则 ASP.NET 应用程序会模拟所收到的任何标记。当前模拟客户的 ASP.NET 应用程序依赖于 NTFS 目录和文件中的设置来允许客户获得访问权限或拒绝其访问。务必将服务器文件空间格式化为 NTFS,以便可以设置访问权限。
Java架构师必看
2021/03/22
1.9K0
检索 COM 类工厂中 CLSID 为 {000209FF-0000-0000-C000-000000000046} 的组件时失败,原因是出现以下错误: 80070005
今天遇到了同样的问题,我们出现的问题是不定时出现日志出现报错信息: Error:检索 COM 类工厂中 CLSID 为 {000209FF-0000-0000-C000-000000000046} 的组件时失败,原因是出现以下错误: 8000401a。 StackTrace: 在 EBidding.DocumentGenerator.GD.WordGenerator.Open(String filePath) 位置 D:\alsmill_KM\VSProject\Ebidding_WebService
用户5640963
2019/07/25
6.2K0
401错误的解决方法_网络连接错误401
在配置IIS的时候,如果安全稍微做的好一些。就会出现各式各样的问题。比如,常见的访问网页会弹出用户名密码的登陆界面,或者是访问某种页面比如 html,asp没事情,但是访问jsp或者php就有问题,显示401.3 ACL 禁止访问资源等  通常的解决办法是。          
全栈程序员站长
2022/11/16
4.6K0
server 2003 (NTFS) 安装完 VS.NET 2003 后调试ASP.NET APP出错
就来了一个Response.Write(“Good moning sunshine“);结果都出错了,唉,真不给面子,昨天晚上把VS.NET 2003从2000搬到2003来,就出问题了.没有见过.好象于IIS6对ASP.NET的授权有关… 贴出错误信息来: “/WebApplication1”应用程序中的服务器错误。 ——————————————————————————–对路径“D:\WINDOWS\Microsoft.NET\Framework\v1.1.4322\Temporary asp.net Files\webapplication1\6680d7be\b46d84c0”的访问被拒绝。
全栈程序员站长
2022/06/30
1K0
Office.Core服务器无法使用问题
1).通过webconfig中增加模拟,加入管理员权限, <identity impersonate="true" userName="系统管理员" password="系统管理员密码"/> 2).这样就能够启动Application进程,操作EXCEL了,能够新建EXCEL,导出EXCEL,但是还是不能打开服务器端的EXCEL文件
happlyfox
2018/10/31
9480
C#生成Excel出现8000401a的错误的另一种解决办法。「建议收藏」
网上能搜到的解决办法,常见的就是以下3种,比如参考这个博客 https://www.cnblogs.com/gavindou/archive/2012/08/29/2661757.html 1,增加虚拟权限:
全栈程序员站长
2022/09/23
5810
IIS发布ASP.NET应用常见错误及解决办法
乐百川
2018/01/09
3.7K0
IIS发布ASP.NET应用常见错误及解决办法
ASP.NET访问Excel 失败的解决方法(错误号:80070005,8000401a)
用asp.net把值写入Excel在本地测试通过,然后提交服务器后老是写入不成功 并提示错误: Retrieving the COM class factory for component with CLSID {00024500-0000-0000-C000-000000000046} failed due to the following error: 80070005.
全栈程序员站长
2022/09/15
1.3K0
【详解】HTTP错误403.1-禁止访问:执行访问被拒绝
在Web开发和服务器管理中,HTTP 403.1错误是一个常见的问题,它表明客户端尝试访问的资源由于权限设置或安全策略的原因而无法被访问。本文将探讨HTTP 403.1错误的原因、影响以及解决方法。
大盘鸡拌面
2025/01/09
6760
IIS 7.0的六大安全新特性为你的Web服务器保驾护航
文章来自:WindowsITPro  2009年2月期 当你启用一台Web服务器的时候,你就把你公司的一部分完全展现给了公众,任凭他人摆布。Web服务器上的那些可以被远程利用的漏洞可能会成为你的梦魇。一个显著的例子就是:微软Internet信息服务(IIS)5.0曾经就留下了丧失生产力和效益的不光彩记录。在那之后,微软对IIS进行了彻底的重新设计,这一次,他们把安全性放在了第一位。成果体现在IIS 6.0上,它被广泛认为是市场上安全性最高的商业Web服务器产品(这一点通过Secunia给出的为数仅5条的安全
张善友
2018/01/30
2.1K0
IIS 7.0的六大安全新特性为你的Web服务器保驾护航
8000401a 因为配置标志不正确 错误及解决办法
找到”Microsoft Excel应用程序”或”Microsoft Word应用程序”,
全栈程序员站长
2022/09/15
1K0
ASP.NET调用word开发环境下正常,iis下报错
检索 COM 类工厂中 CLSID 为 {00024500-0000-0000-C000-000000000046} 的组件时失败,原因是出现以下错误: 80070005 找了很多,可行的解决办法: http://www.blogchinese.com/user1/53009/archives/2006/excel.shtml 其要点是:   1、运行DCOMCNFG,找到应用程序,设置属性:保持安全性为默认,标识为交互式用户   2、全局的选项卡中的默认配置中的安全性中,访问和启动两种安全性都要添加以下用
用户1075292
2018/01/23
1.2K0
Win2003灵活实现多Web站点的设置方法
  1>两个网站使用不同的IP地址。这样用户在访问第一个网站需在浏览器中输入http://192.168.100.1.访问第二个网站需在浏览器中输入http://192.168.200.1.(假设的)
会长君
2023/04/26
1K0
​安全服务之安全基线及加固(五)IIS篇
这次的内容接之前中间件方面的加固,分享一下IIS加固的笔记。就以手里的IIS6.0为例了。
Power7089
2020/07/27
2.9K0
​安全服务之安全基线及加固(五)IIS篇
检索COM类工厂中CLSID为{00024500-0000-0000-C000-000000000046}的组件时失败
具体解决方法如下: 1:在服务器上安装office的Excel软件; 2:在"开始"->"运行"中输入dcomcnfg.exe启动"组件服务"; 3:依次双击"组件服务"->"计算机"->"我的电脑"->"DCOM配置"; 4:在"DCOM配置"中找到"Microsoft Excel 应用程序",在它上面点击右键,然后点击"属性",弹出"Microsoft Excel 应用程序属性"对话框; 5:点击"标识"标签,选择"下列用户"(用户名和密码写当前管理员的); 6:点击"安全"标签,在"启动和激活权限"上
磊哥
2018/05/08
1.6K0
.Net调用Office Com组件的原理及问题:检索com类工厂组件检索 COM 类工厂中 CLSID 为 {XXX} 的组件失败
最近在本地64位win10操作系统+vs2015+office2010(卸载了2016,因为高版本反而不支持),做PPT文档的解析成HTML,在部署到windows server 2012上的时候遇到了不少麻烦,恰好见到两篇文章,得以解决。
csxiaoyao
2019/02/18
5.3K0
IIS6架设网站过程常见问题解决方法总结
  如果你的服务器是2003的,它默认只支持.net,不支持asp所以须进行以下操作:
会长君
2023/04/26
2.2K0
域渗透之委派攻击详解(非约束委派/约束委派/资源委派)
大家好,这里是 渗透攻击红队 的第 77 篇文章,本公众号会记录一些红队攻击的案例,不定时更新!请勿利用文章内的相关技术从事非法测试,如因此产生的一切不良后果与文章作者和本公众号无关!
渗透攻击红队
2021/11/10
11.6K1
基于资源的约束委派(RBCD)
给机器添加RBCD的前提:1.自己能给自己添加 2.ACL→Account Restriction/msDS-AllowedToActOnBehalfOfOtherIdentity属性→creator-sid/backdoor/high level user。如果对计算机对象/域用户具Account Restriction和msDS-AllowedToActOnBehalfOfOtherIdentity属性的WriteProperty,就能进行基于 资源约束委派的利用。
红队蓝军
2023/02/25
3.3K0
基于资源的约束委派(RBCD)
OPC-DA 在 Window7 下配置不得不说的步骤
OPC 经典框架是基于Windows技术,使用COM / DCOM(分布式组件对象模型)在软件之间进行交换数据。OPC 经典框架包含如下协议:
剑指工控
2021/11/09
1.5K0
OPC-DA 在 Window7 下配置不得不说的步骤
推荐阅读
相关推荐
ASP.NET实现身份模拟
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
本文部分代码块支持一键运行,欢迎体验
本文部分代码块支持一键运行,欢迎体验