如何利用工具,迅猛定位低效SQL? | 1分钟系列

2023-11-30 14:38

本文主要是介绍如何利用工具,迅猛定位低效SQL? | 1分钟系列,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

《两个工具分析SQL死锁》

《SQL空值带来的大坑》

两个案例分析,展现了MySQL性能分析工具explain的强大。


《同一个SQL语句,为啥性能差异咋就这么大呢?》

详细叙述了explain结果中最重要的type字段(连接类型)的含义。

 

其实,explain结果中还有一个Extra字段,对分析与优化SQL有很大的帮助,今天花1分钟简单和大家聊一聊。

 

数据准备

create table user (

id int primary key,

name varchar(20),

sex varchar(5),

index(name)

)engine=innodb;

 

insert into user values(1, 'shenjian','no');

insert into user values(2, 'zhangsan','no');

insert into user values(3, 'lisi', 'yes');

insert into user values(4, 'lisi', 'no');

 

数据说明

用户表:id主键索引,name普通索引(非唯一),sex无索引

四行记录:其中name普通索引存在重复记录lisi;

 

实验目的

通过构造各类SQL语句,对explain的Extra字段进行说明,启发式定位待优化低性能SQL语句。

 

一、【Using where】

640?wx_fmt=png

实验语句

explain select * from user where sex='no';

 

结果说明

Extra为Using where说明,SQL使用了where条件过滤数据

 

需要注意的是:

(1)返回所有记录的SQL,不使用where条件过滤数据,大概率不符合预期,对于这类SQL往往需要进行优化;

(2)使用了where条件的SQL,并不代表不需要优化,往往需要配合explain结果中的type(连接类型)来综合判断;

画外音:join type在同一个SQL语句,为啥性能差异咋就这么大呢?一文中有详细叙述,本文不再展开。

 

本例虽然Extra字段说明使用了where条件过滤,但type属性是ALL,表示需要扫描全部数据,仍有优化空间。

 

常见的优化方法为,在where过滤属性上添加索引。

画外音:本例中,sex字段区分度不高,添加索引对性能提升有限。

 

二、【Using index】

640?wx_fmt=png

实验语句

explain select id,name from user where name='shenjian';

 

结果说明

Extra为Using index说明,SQL所需要返回的所有列数据均在一棵索引树上,而无需访问实际的行记录

画外音:The column information is retrieved from the table using only information in the index tree without having to do an additional seek to read the actual row.

 

这类SQL语句往往性能较好。

 

问题来了,什么样的列数据,会包含在索引树上呢?

 

三、【Using index condition】

640?wx_fmt=png

实验语句:

explain select id,name,sex from user 

where name='shenjian';

画外音:该SQL语句与上一个SQL语句不同的地方在于,被查询的列,多了一个sex字段。

 

结果说明:

Extra为Using index condition说明,确实命中了索引,但不是所有的列数据都在索引树上,还需要访问实际的行记录

画外音:聚集索引,普通索引的底层实现差异,详见《1分钟了解MyISAM与InnoDB的索引差异》。

 

这类SQL语句性能也较高,但不如Using index

 

问题来了,如何优化为Using index呢?

 

四、【Using filesort】

640?wx_fmt=png

实验语句:

explain select * from user order by sex;

 

结果说明:

Extra为Using filesort说明,得到所需结果集,需要对所有记录进行文件排序

 

这类SQL语句性能极差,需要进行优化。

 

典型的,在一个没有建立索引的列上进行了order by,就会触发filesort,常见的优化方案是,在order by的列上添加索引,避免每次查询都全量排序。

 

五、【Using temporary】

640?wx_fmt=png

实验语句:

explain select * from user group by name order by sex;

 

结果说明:

Extra为Using temporary说明,需要建立临时表(temporary table)来暂存中间结果

 

这类SQL语句性能较低,往往也需要进行优化。

 

典型的,group byorder by同时存在,且作用于不同的字段时,就会建立临时表,以便计算出最终的结果集。

 

六、【Using join buffer (Block Nested Loop)】

640?wx_fmt=png

实验语句:

explain select * from user where id in(select id from user where sex='no');

 

结果说明:

Extra为Using join buffer (Block Nested Loop)说明,需要进行嵌套循环计算

画外音:内层和外层的type均为ALL,rows均为4,需要循环进行4*4次计算。

 

这类SQL语句性能往往也较低,需要进行优化。

 

典型的,两个关联表join,关联字段均未建立索引,就会出现这种情况。常见的优化方案是,在关联字段上添加索引,避免每次嵌套循环计算。

 

结尾

explain是SQL优化中最常用的工具,搞定type和Extra,explain也就基本搞定了。

  • 《MySQL explain,type分析》进行了常见type分析

  • 本文进行了常见Extra分析

  • 《两个工具分析SQL死锁》和《SQL空值带来的大坑》是两篇典型案例分析

  • 《MyISAM与InnoDB的索引差异》是InnoDB和MyISAM索引差异分析

  • 《数据库索引,到底是什么做的?》是索引底层实现分析

以上几篇文章,强烈建议大家读透。


640?wx_fmt=jpeg

架构师之路-分享技术思路

相关推荐

《缓冲池(buffer pool),这次彻底懂了!》

《写缓冲(change buffer),这次彻底懂了!》


作业

select id,name where XXXUsing index

select id,name,sex where XXXUsing index condition

后者如何优化为Using index


希望大家有收获,帮忙再看哟。

这篇关于如何利用工具,迅猛定位低效SQL? | 1分钟系列的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/437407

相关文章

Python使用OpenCV实现获取视频时长的小工具

《Python使用OpenCV实现获取视频时长的小工具》在处理视频数据时,获取视频的时长是一项常见且基础的需求,本文将详细介绍如何使用Python和OpenCV获取视频时长,并对每一行代码进行深入解析... 目录一、代码实现二、代码解析1. 导入 OpenCV 库2. 定义获取视频时长的函数3. 打开视频文

MySQL 中的 CAST 函数详解及常见用法

《MySQL中的CAST函数详解及常见用法》CAST函数是MySQL中用于数据类型转换的重要函数,它允许你将一个值从一种数据类型转换为另一种数据类型,本文给大家介绍MySQL中的CAST... 目录mysql 中的 CAST 函数详解一、基本语法二、支持的数据类型三、常见用法示例1. 字符串转数字2. 数字

Mysql实现范围分区表(新增、删除、重组、查看)

《Mysql实现范围分区表(新增、删除、重组、查看)》MySQL分区表的四种类型(范围、哈希、列表、键值),主要介绍了范围分区的创建、查询、添加、删除及重组织操作,具有一定的参考价值,感兴趣的可以了解... 目录一、mysql分区表分类二、范围分区(Range Partitioning1、新建分区表:2、分

MySQL 定时新增分区的实现示例

《MySQL定时新增分区的实现示例》本文主要介绍了通过存储过程和定时任务实现MySQL分区的自动创建,解决大数据量下手动维护的繁琐问题,具有一定的参考价值,感兴趣的可以了解一下... mysql创建好分区之后,有时候会需要自动创建分区。比如,一些表数据量非常大,有些数据是热点数据,按照日期分区MululbU

SQL Server配置管理器无法打开的四种解决方法

《SQLServer配置管理器无法打开的四种解决方法》本文总结了SQLServer配置管理器无法打开的四种解决方法,文中通过图文示例介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的... 目录方法一:桌面图标进入方法二:运行窗口进入检查版本号对照表php方法三:查找文件路径方法四:检查 S

MySQL 删除数据详解(最新整理)

《MySQL删除数据详解(最新整理)》:本文主要介绍MySQL删除数据的相关知识,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录一、前言二、mysql 中的三种删除方式1.DELETE语句✅ 基本语法: 示例:2.TRUNCATE语句✅ 基本语

MySQL中查找重复值的实现

《MySQL中查找重复值的实现》查找重复值是一项常见需求,比如在数据清理、数据分析、数据质量检查等场景下,我们常常需要找出表中某列或多列的重复值,具有一定的参考价值,感兴趣的可以了解一下... 目录技术背景实现步骤方法一:使用GROUP BY和HAVING子句方法二:仅返回重复值方法三:返回完整记录方法四:

从入门到精通MySQL联合查询

《从入门到精通MySQL联合查询》:本文主要介绍从入门到精通MySQL联合查询,本文通过实例代码给大家介绍的非常详细,需要的朋友可以参考下... 目录摘要1. 多表联合查询时mysql内部原理2. 内连接3. 外连接4. 自连接5. 子查询6. 合并查询7. 插入查询结果摘要前面我们学习了数据库设计时要满

怎样通过分析GC日志来定位Java进程的内存问题

《怎样通过分析GC日志来定位Java进程的内存问题》:本文主要介绍怎样通过分析GC日志来定位Java进程的内存问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、GC 日志基础配置1. 启用详细 GC 日志2. 不同收集器的日志格式二、关键指标与分析维度1.

Java进程异常故障定位及排查过程

《Java进程异常故障定位及排查过程》:本文主要介绍Java进程异常故障定位及排查过程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、故障发现与初步判断1. 监控系统告警2. 日志初步分析二、核心排查工具与步骤1. 进程状态检查2. CPU 飙升问题3. 内存