如何利用工具,迅猛定位低效SQL? | 1分钟系列

2023-11-30 14:38

本文主要是介绍如何利用工具,迅猛定位低效SQL? | 1分钟系列,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

《两个工具分析SQL死锁》

《SQL空值带来的大坑》

两个案例分析,展现了MySQL性能分析工具explain的强大。


《同一个SQL语句,为啥性能差异咋就这么大呢?》

详细叙述了explain结果中最重要的type字段(连接类型)的含义。

 

其实,explain结果中还有一个Extra字段,对分析与优化SQL有很大的帮助,今天花1分钟简单和大家聊一聊。

 

数据准备

create table user (

id int primary key,

name varchar(20),

sex varchar(5),

index(name)

)engine=innodb;

 

insert into user values(1, 'shenjian','no');

insert into user values(2, 'zhangsan','no');

insert into user values(3, 'lisi', 'yes');

insert into user values(4, 'lisi', 'no');

 

数据说明

用户表:id主键索引,name普通索引(非唯一),sex无索引

四行记录:其中name普通索引存在重复记录lisi;

 

实验目的

通过构造各类SQL语句,对explain的Extra字段进行说明,启发式定位待优化低性能SQL语句。

 

一、【Using where】

640?wx_fmt=png

实验语句

explain select * from user where sex='no';

 

结果说明

Extra为Using where说明,SQL使用了where条件过滤数据

 

需要注意的是:

(1)返回所有记录的SQL,不使用where条件过滤数据,大概率不符合预期,对于这类SQL往往需要进行优化;

(2)使用了where条件的SQL,并不代表不需要优化,往往需要配合explain结果中的type(连接类型)来综合判断;

画外音:join type在同一个SQL语句,为啥性能差异咋就这么大呢?一文中有详细叙述,本文不再展开。

 

本例虽然Extra字段说明使用了where条件过滤,但type属性是ALL,表示需要扫描全部数据,仍有优化空间。

 

常见的优化方法为,在where过滤属性上添加索引。

画外音:本例中,sex字段区分度不高,添加索引对性能提升有限。

 

二、【Using index】

640?wx_fmt=png

实验语句

explain select id,name from user where name='shenjian';

 

结果说明

Extra为Using index说明,SQL所需要返回的所有列数据均在一棵索引树上,而无需访问实际的行记录

画外音:The column information is retrieved from the table using only information in the index tree without having to do an additional seek to read the actual row.

 

这类SQL语句往往性能较好。

 

问题来了,什么样的列数据,会包含在索引树上呢?

 

三、【Using index condition】

640?wx_fmt=png

实验语句:

explain select id,name,sex from user 

where name='shenjian';

画外音:该SQL语句与上一个SQL语句不同的地方在于,被查询的列,多了一个sex字段。

 

结果说明:

Extra为Using index condition说明,确实命中了索引,但不是所有的列数据都在索引树上,还需要访问实际的行记录

画外音:聚集索引,普通索引的底层实现差异,详见《1分钟了解MyISAM与InnoDB的索引差异》。

 

这类SQL语句性能也较高,但不如Using index

 

问题来了,如何优化为Using index呢?

 

四、【Using filesort】

640?wx_fmt=png

实验语句:

explain select * from user order by sex;

 

结果说明:

Extra为Using filesort说明,得到所需结果集,需要对所有记录进行文件排序

 

这类SQL语句性能极差,需要进行优化。

 

典型的,在一个没有建立索引的列上进行了order by,就会触发filesort,常见的优化方案是,在order by的列上添加索引,避免每次查询都全量排序。

 

五、【Using temporary】

640?wx_fmt=png

实验语句:

explain select * from user group by name order by sex;

 

结果说明:

Extra为Using temporary说明,需要建立临时表(temporary table)来暂存中间结果

 

这类SQL语句性能较低,往往也需要进行优化。

 

典型的,group byorder by同时存在,且作用于不同的字段时,就会建立临时表,以便计算出最终的结果集。

 

六、【Using join buffer (Block Nested Loop)】

640?wx_fmt=png

实验语句:

explain select * from user where id in(select id from user where sex='no');

 

结果说明:

Extra为Using join buffer (Block Nested Loop)说明,需要进行嵌套循环计算

画外音:内层和外层的type均为ALL,rows均为4,需要循环进行4*4次计算。

 

这类SQL语句性能往往也较低,需要进行优化。

 

典型的,两个关联表join,关联字段均未建立索引,就会出现这种情况。常见的优化方案是,在关联字段上添加索引,避免每次嵌套循环计算。

 

结尾

explain是SQL优化中最常用的工具,搞定type和Extra,explain也就基本搞定了。

  • 《MySQL explain,type分析》进行了常见type分析

  • 本文进行了常见Extra分析

  • 《两个工具分析SQL死锁》和《SQL空值带来的大坑》是两篇典型案例分析

  • 《MyISAM与InnoDB的索引差异》是InnoDB和MyISAM索引差异分析

  • 《数据库索引,到底是什么做的?》是索引底层实现分析

以上几篇文章,强烈建议大家读透。


640?wx_fmt=jpeg

架构师之路-分享技术思路

相关推荐

《缓冲池(buffer pool),这次彻底懂了!》

《写缓冲(change buffer),这次彻底懂了!》


作业

select id,name where XXXUsing index

select id,name,sex where XXXUsing index condition

后者如何优化为Using index


希望大家有收获,帮忙再看哟。

这篇关于如何利用工具,迅猛定位低效SQL? | 1分钟系列的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/437407

相关文章

5分钟获取deepseek api并搭建简易问答应用

《5分钟获取deepseekapi并搭建简易问答应用》本文主要介绍了5分钟获取deepseekapi并搭建简易问答应用,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需... 目录1、获取api2、获取base_url和chat_model3、配置模型参数方法一:终端中临时将加

将sqlserver数据迁移到mysql的详细步骤记录

《将sqlserver数据迁移到mysql的详细步骤记录》:本文主要介绍将SQLServer数据迁移到MySQL的步骤,包括导出数据、转换数据格式和导入数据,通过示例和工具说明,帮助大家顺利完成... 目录前言一、导出SQL Server 数据二、转换数据格式为mysql兼容格式三、导入数据到MySQL数据

MySQL分表自动化创建的实现方案

《MySQL分表自动化创建的实现方案》在数据库应用场景中,随着数据量的不断增长,单表存储数据可能会面临性能瓶颈,例如查询、插入、更新等操作的效率会逐渐降低,分表是一种有效的优化策略,它将数据分散存储在... 目录一、项目目的二、实现过程(一)mysql 事件调度器结合存储过程方式1. 开启事件调度器2. 创

SQL Server使用SELECT INTO实现表备份的代码示例

《SQLServer使用SELECTINTO实现表备份的代码示例》在数据库管理过程中,有时我们需要对表进行备份,以防数据丢失或修改错误,在SQLServer中,可以使用SELECTINT... 在数据库管理过程中,有时我们需要对表进行备份,以防数据丢失或修改错误。在 SQL Server 中,可以使用 SE

基于Go语言实现一个压测工具

《基于Go语言实现一个压测工具》这篇文章主要为大家详细介绍了基于Go语言实现一个简单的压测工具,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录整体架构通用数据处理模块Http请求响应数据处理Curl参数解析处理客户端模块Http客户端处理Grpc客户端处理Websocket客户端

mysql外键创建不成功/失效如何处理

《mysql外键创建不成功/失效如何处理》文章介绍了在MySQL5.5.40版本中,创建带有外键约束的`stu`和`grade`表时遇到的问题,发现`grade`表的`id`字段没有随着`studen... 当前mysql版本:SELECT VERSION();结果为:5.5.40。在复习mysql外键约

SQL注入漏洞扫描之sqlmap详解

《SQL注入漏洞扫描之sqlmap详解》SQLMap是一款自动执行SQL注入的审计工具,支持多种SQL注入技术,包括布尔型盲注、时间型盲注、报错型注入、联合查询注入和堆叠查询注入... 目录what支持类型how---less-1为例1.检测网站是否存在sql注入漏洞的注入点2.列举可用数据库3.列举数据库

java图像识别工具类(ImageRecognitionUtils)使用实例详解

《java图像识别工具类(ImageRecognitionUtils)使用实例详解》:本文主要介绍如何在Java中使用OpenCV进行图像识别,包括图像加载、预处理、分类、人脸检测和特征提取等步骤... 目录前言1. 图像识别的背景与作用2. 设计目标3. 项目依赖4. 设计与实现 ImageRecogni

Mysql虚拟列的使用场景

《Mysql虚拟列的使用场景》MySQL虚拟列是一种在查询时动态生成的特殊列,它不占用存储空间,可以提高查询效率和数据处理便利性,本文给大家介绍Mysql虚拟列的相关知识,感兴趣的朋友一起看看吧... 目录1. 介绍mysql虚拟列1.1 定义和作用1.2 虚拟列与普通列的区别2. MySQL虚拟列的类型2

mysql数据库分区的使用

《mysql数据库分区的使用》MySQL分区技术通过将大表分割成多个较小片段,提高查询性能、管理效率和数据存储效率,本文就来介绍一下mysql数据库分区的使用,感兴趣的可以了解一下... 目录【一】分区的基本概念【1】物理存储与逻辑分割【2】查询性能提升【3】数据管理与维护【4】扩展性与并行处理【二】分区的