MySQL-32:全表扫描

2024-03-13 17:20
文章标签 mysql 扫描 全表 32 database

本文主要是介绍MySQL-32:全表扫描,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

全表扫描的概念: 数据库服务器用来搜寻表的每一条记录的过程,直到所有符合给定条件的记录返回为止。

32.1 全表扫描流程

例如,我们执行如下sql,对表t进行全表扫描,这条sql的目的就是将全表的结果发送给客户端。

select * from t

流程如下:

  1. 服务端内存中有个net_buffer,大小由参数net_buffer_length控制,默认大小为16K。
  2. 读取一行,写入net_buffer中,直到写满,调用网络接口发送出去。
  3. 如果发送成功,则清空net_buffer,重复上述动作。
  4. 如果发送函数返回 EAGAIN 或 WSAEWOULDBLOCK,就表示本地网络栈写满了,进入等待。直到网络栈重新可写,再继续发送。

这样子,就是说MySQL在进行全表扫描的时候,是边读边发的,最大的内存使用为net_buffer。

Sending to client 与 Sending data:

  • Sending data :可能处理执行器中的任意阶段,也就是语句正在执行中的意思。
  • Sending to client:表示服务端的网络栈写满了

一条查询语句的状态变化如下:

  1. MySQL 查询语句进入执行阶段后,首先把状态设置成“Sending data”;
  2. 发送执行结果的列相关的信息给客户端;
  3. 再继续执行语句的流程;执行完成后,把状态设置成空字符串。
32.2 全表扫描对 InnoDB 的影响

当一个更新语句过来,先更新内存中信息,再写binlog,后续有空再同步到磁盘,这就是WAL技术。但是这里有个内存命中率的问题,内存大小是有限的,但所有的数据也都已经在用时,是需要从在使用的内存页中选择一个出来,进行淘汰,这个选择的策略就是内存淘汰算法,MySQL使用的淘汰算法未LRU,最近未使用。

LRU:最近未使用淘汰算法 :使用链表来进行实现,将最近的使用的页面放在链表头,淘汰的时候,就会淘汰链表末尾的页面。示意图如下:
在这里插入图片描述

但是MySQL在进行全表扫描的时候,会导致内存命中率大大下降,也会导致内存页就行大换血。所以MySQL对LRU算法进行了改进。
将LRU的链表按照5:3的比例来进行分段,前面为young区域,后面未old区域,吼吼,怎么有点JVM的赶脚。

访问链表中节点方式如下:

  • 访问young区域内的节点,则将该页面转移到链表头

  • 访问old区域内的节点,需要进行如下判断

    • 若这个数据页在 LRU 链表中存在的时间超过了 1 秒,就把它移动到链表头部;
    • 如果这个数据页在 LRU 链表中存在的时间短于 1 秒,位置保持不变。1 秒这个时间,是由参数 innodb_old_blocks_time 控制的。其默认值是 1000,单位毫秒。
      在这里插入图片描述

这个算法简直就是为全表扫描量身定做的啊,全表扫描为顺序访问,一个数据页的访问时间不会超过一秒钟,也不会进行young区域,也会很快地淘汰出去。

这个算法的思想也就是将一条链表切成两段,执行两种操作模式,在确保正常应用的情况,在额外添加上其它功能。

这篇关于MySQL-32:全表扫描的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/805606

相关文章

mysql删除无用用户的方法实现

《mysql删除无用用户的方法实现》本文主要介绍了mysql删除无用用户的方法实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧... 1、删除不用的账户(1) 查看当前已存在账户mysql> select user,host,pa

使用Dify访问mysql数据库详细代码示例

《使用Dify访问mysql数据库详细代码示例》:本文主要介绍使用Dify访问mysql数据库的相关资料,并详细讲解了如何在本地搭建数据库访问服务,使用ngrok暴露到公网,并创建知识库、数据库访... 1、在本地搭建数据库访问的服务,并使用ngrok暴露到公网。#sql_tools.pyfrom

MySQL中实现多表查询的操作方法(配sql+实操图+案例巩固 通俗易懂版)

《MySQL中实现多表查询的操作方法(配sql+实操图+案例巩固通俗易懂版)》本文主要讲解了MySQL中的多表查询,包括子查询、笛卡尔积、自连接、多表查询的实现方法以及多列子查询等,通过实际例子和操... 目录复合查询1. 回顾查询基本操作group by 分组having1. 显示部门号为10的部门名,员

MyBatis-Plus中静态工具Db的多种用法及实例分析

《MyBatis-Plus中静态工具Db的多种用法及实例分析》本文将详细讲解MyBatis-Plus中静态工具Db的各种用法,并结合具体案例进行演示和说明,具有很好的参考价值,希望对大家有所帮助,如有... 目录MyBATis-Plus中静态工具Db的多种用法及实例案例背景使用静态工具Db进行数据库操作插入

MySQL中COALESCE函数示例详解

《MySQL中COALESCE函数示例详解》COALESCE是一个功能强大且常用的SQL函数,主要用来处理NULL值和实现灵活的值选择策略,能够使查询逻辑更清晰、简洁,:本文主要介绍MySQL中C... 目录语法示例1. 替换 NULL 值2. 用于字段默认值3. 多列优先级4. 结合聚合函数注意事项总结C

通过ibd文件恢复MySql数据的操作方法

《通过ibd文件恢复MySql数据的操作方法》文章介绍通过.ibd文件恢复MySQL数据的过程,包括知道表结构和不知道表结构两种情况,对于知道表结构的情况,可以直接将.ibd文件复制到新的数据库目录并... 目录第一种情况:知道表结构第二种情况:不知道表结构总结今天干了一件大事,安装1Panel导致原来服务

mysql关联查询速度慢的问题及解决

《mysql关联查询速度慢的问题及解决》:本文主要介绍mysql关联查询速度慢的问题及解决方案,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录mysql关联查询速度慢1. 记录原因1.1 在一次线上的服务中1.2 最终发现2. 解决方案3. 具体操作总结mysql

Linux搭建Mysql主从同步的教程

《Linux搭建Mysql主从同步的教程》:本文主要介绍Linux搭建Mysql主从同步的教程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录linux搭建mysql主从同步1.启动mysql服务2.修改Mysql主库配置文件/etc/my.cnf3.重启主库my

MySql中的数据库连接池详解

《MySql中的数据库连接池详解》:本文主要介绍MySql中的数据库连接池方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录mysql数据库连接池1、概念2、为什么会出现数据库连接池3、原理4、数据库连接池的提供商5、DataSource数据源6、DBCP7、C

MySQL的隐式锁(Implicit Lock)原理实现

《MySQL的隐式锁(ImplicitLock)原理实现》MySQL的InnoDB存储引擎中隐式锁是一种自动管理的锁,用于保证事务在行级别操作时的数据一致性和安全性,本文主要介绍了MySQL的隐式锁... 目录1. 背景:什么是隐式锁?2. 隐式锁的工作原理3. 隐式锁的类型4. 隐式锁的实现与源代码分析4