如何利用工具,迅猛定位低效SQL? | 1分钟系列

2023-11-30 14:38

本文主要是介绍如何利用工具,迅猛定位低效SQL? | 1分钟系列,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

《两个工具分析SQL死锁》

《SQL空值带来的大坑》

两个案例分析,展现了MySQL性能分析工具explain的强大。


《同一个SQL语句,为啥性能差异咋就这么大呢?》

详细叙述了explain结果中最重要的type字段(连接类型)的含义。

 

其实,explain结果中还有一个Extra字段,对分析与优化SQL有很大的帮助,今天花1分钟简单和大家聊一聊。

 

数据准备

create table user (

id int primary key,

name varchar(20),

sex varchar(5),

index(name)

)engine=innodb;

 

insert into user values(1, 'shenjian','no');

insert into user values(2, 'zhangsan','no');

insert into user values(3, 'lisi', 'yes');

insert into user values(4, 'lisi', 'no');

 

数据说明

用户表:id主键索引,name普通索引(非唯一),sex无索引

四行记录:其中name普通索引存在重复记录lisi;

 

实验目的

通过构造各类SQL语句,对explain的Extra字段进行说明,启发式定位待优化低性能SQL语句。

 

一、【Using where】

640?wx_fmt=png

实验语句

explain select * from user where sex='no';

 

结果说明

Extra为Using where说明,SQL使用了where条件过滤数据

 

需要注意的是:

(1)返回所有记录的SQL,不使用where条件过滤数据,大概率不符合预期,对于这类SQL往往需要进行优化;

(2)使用了where条件的SQL,并不代表不需要优化,往往需要配合explain结果中的type(连接类型)来综合判断;

画外音:join type在同一个SQL语句,为啥性能差异咋就这么大呢?一文中有详细叙述,本文不再展开。

 

本例虽然Extra字段说明使用了where条件过滤,但type属性是ALL,表示需要扫描全部数据,仍有优化空间。

 

常见的优化方法为,在where过滤属性上添加索引。

画外音:本例中,sex字段区分度不高,添加索引对性能提升有限。

 

二、【Using index】

640?wx_fmt=png

实验语句

explain select id,name from user where name='shenjian';

 

结果说明

Extra为Using index说明,SQL所需要返回的所有列数据均在一棵索引树上,而无需访问实际的行记录

画外音:The column information is retrieved from the table using only information in the index tree without having to do an additional seek to read the actual row.

 

这类SQL语句往往性能较好。

 

问题来了,什么样的列数据,会包含在索引树上呢?

 

三、【Using index condition】

640?wx_fmt=png

实验语句:

explain select id,name,sex from user 

where name='shenjian';

画外音:该SQL语句与上一个SQL语句不同的地方在于,被查询的列,多了一个sex字段。

 

结果说明:

Extra为Using index condition说明,确实命中了索引,但不是所有的列数据都在索引树上,还需要访问实际的行记录

画外音:聚集索引,普通索引的底层实现差异,详见《1分钟了解MyISAM与InnoDB的索引差异》。

 

这类SQL语句性能也较高,但不如Using index

 

问题来了,如何优化为Using index呢?

 

四、【Using filesort】

640?wx_fmt=png

实验语句:

explain select * from user order by sex;

 

结果说明:

Extra为Using filesort说明,得到所需结果集,需要对所有记录进行文件排序

 

这类SQL语句性能极差,需要进行优化。

 

典型的,在一个没有建立索引的列上进行了order by,就会触发filesort,常见的优化方案是,在order by的列上添加索引,避免每次查询都全量排序。

 

五、【Using temporary】

640?wx_fmt=png

实验语句:

explain select * from user group by name order by sex;

 

结果说明:

Extra为Using temporary说明,需要建立临时表(temporary table)来暂存中间结果

 

这类SQL语句性能较低,往往也需要进行优化。

 

典型的,group byorder by同时存在,且作用于不同的字段时,就会建立临时表,以便计算出最终的结果集。

 

六、【Using join buffer (Block Nested Loop)】

640?wx_fmt=png

实验语句:

explain select * from user where id in(select id from user where sex='no');

 

结果说明:

Extra为Using join buffer (Block Nested Loop)说明,需要进行嵌套循环计算

画外音:内层和外层的type均为ALL,rows均为4,需要循环进行4*4次计算。

 

这类SQL语句性能往往也较低,需要进行优化。

 

典型的,两个关联表join,关联字段均未建立索引,就会出现这种情况。常见的优化方案是,在关联字段上添加索引,避免每次嵌套循环计算。

 

结尾

explain是SQL优化中最常用的工具,搞定type和Extra,explain也就基本搞定了。

  • 《MySQL explain,type分析》进行了常见type分析

  • 本文进行了常见Extra分析

  • 《两个工具分析SQL死锁》和《SQL空值带来的大坑》是两篇典型案例分析

  • 《MyISAM与InnoDB的索引差异》是InnoDB和MyISAM索引差异分析

  • 《数据库索引,到底是什么做的?》是索引底层实现分析

以上几篇文章,强烈建议大家读透。


640?wx_fmt=jpeg

架构师之路-分享技术思路

相关推荐

《缓冲池(buffer pool),这次彻底懂了!》

《写缓冲(change buffer),这次彻底懂了!》


作业

select id,name where XXXUsing index

select id,name,sex where XXXUsing index condition

后者如何优化为Using index


希望大家有收获,帮忙再看哟。

这篇关于如何利用工具,迅猛定位低效SQL? | 1分钟系列的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/437407

相关文章

Spring Security 从入门到进阶系列教程

Spring Security 入门系列 《保护 Web 应用的安全》 《Spring-Security-入门(一):登录与退出》 《Spring-Security-入门(二):基于数据库验证》 《Spring-Security-入门(三):密码加密》 《Spring-Security-入门(四):自定义-Filter》 《Spring-Security-入门(五):在 Sprin

SQL中的外键约束

外键约束用于表示两张表中的指标连接关系。外键约束的作用主要有以下三点: 1.确保子表中的某个字段(外键)只能引用父表中的有效记录2.主表中的列被删除时,子表中的关联列也会被删除3.主表中的列更新时,子表中的关联元素也会被更新 子表中的元素指向主表 以下是一个外键约束的实例展示

基于MySQL Binlog的Elasticsearch数据同步实践

一、为什么要做 随着马蜂窝的逐渐发展,我们的业务数据越来越多,单纯使用 MySQL 已经不能满足我们的数据查询需求,例如对于商品、订单等数据的多维度检索。 使用 Elasticsearch 存储业务数据可以很好的解决我们业务中的搜索需求。而数据进行异构存储后,随之而来的就是数据同步的问题。 二、现有方法及问题 对于数据同步,我们目前的解决方案是建立数据中间表。把需要检索的业务数据,统一放到一张M

如何去写一手好SQL

MySQL性能 最大数据量 抛开数据量和并发数,谈性能都是耍流氓。MySQL没有限制单表最大记录数,它取决于操作系统对文件大小的限制。 《阿里巴巴Java开发手册》提出单表行数超过500万行或者单表容量超过2GB,才推荐分库分表。性能由综合因素决定,抛开业务复杂度,影响程度依次是硬件配置、MySQL配置、数据表设计、索引优化。500万这个值仅供参考,并非铁律。 博主曾经操作过超过4亿行数据

无人叉车3d激光slam多房间建图定位异常处理方案-墙体画线地图切分方案

墙体画线地图切分方案 针对问题:墙体两侧特征混淆误匹配,导致建图和定位偏差,表现为过门跳变、外月台走歪等 ·解决思路:预期的根治方案IGICP需要较长时间完成上线,先使用切分地图的工程化方案,即墙体两侧切分为不同地图,在某一侧只使用该侧地图进行定位 方案思路 切分原理:切分地图基于关键帧位置,而非点云。 理论基础:光照是直线的,一帧点云必定只能照射到墙的一侧,无法同时照到两侧实践考虑:关

性能分析之MySQL索引实战案例

文章目录 一、前言二、准备三、MySQL索引优化四、MySQL 索引知识回顾五、总结 一、前言 在上一讲性能工具之 JProfiler 简单登录案例分析实战中已经发现SQL没有建立索引问题,本文将一起从代码层去分析为什么没有建立索引? 开源ERP项目地址:https://gitee.com/jishenghua/JSH_ERP 二、准备 打开IDEA找到登录请求资源路径位置

MySQL数据库宕机,启动不起来,教你一招搞定!

作者介绍:老苏,10余年DBA工作运维经验,擅长Oracle、MySQL、PG、Mongodb数据库运维(如安装迁移,性能优化、故障应急处理等)公众号:老苏畅谈运维欢迎关注本人公众号,更多精彩与您分享。 MySQL数据库宕机,数据页损坏问题,启动不起来,该如何排查和解决,本文将为你说明具体的排查过程。 查看MySQL error日志 查看 MySQL error日志,排查哪个表(表空间

高效录音转文字:2024年四大工具精选!

在快节奏的工作生活中,能够快速将录音转换成文字是一项非常实用的能力。特别是在需要记录会议纪要、讲座内容或者是采访素材的时候,一款优秀的在线录音转文字工具能派上大用场。以下推荐几个好用的录音转文字工具! 365在线转文字 直达链接:https://www.pdf365.cn/ 365在线转文字是一款提供在线录音转文字服务的工具,它以其高效、便捷的特点受到用户的青睐。用户无需下载安装任何软件,只

MySQL高性能优化规范

前言:      笔者最近上班途中突然想丰富下自己的数据库优化技能。于是在查阅了多篇文章后,总结出了这篇! 数据库命令规范 所有数据库对象名称必须使用小写字母并用下划线分割 所有数据库对象名称禁止使用mysql保留关键字(如果表名中包含关键字查询时,需要将其用单引号括起来) 数据库对象的命名要能做到见名识意,并且最后不要超过32个字符 临时库表必须以tmp_为前缀并以日期为后缀,备份

科研绘图系列:R语言扩展物种堆积图(Extended Stacked Barplot)

介绍 R语言的扩展物种堆积图是一种数据可视化工具,它不仅展示了物种的堆积结果,还整合了不同样本分组之间的差异性分析结果。这种图形表示方法能够直观地比较不同物种在各个分组中的显著性差异,为研究者提供了一种有效的数据解读方式。 加载R包 knitr::opts_chunk$set(warning = F, message = F)library(tidyverse)library(phyl