MySQL-32:全表扫描

2024-03-13 17:20
文章标签 mysql 扫描 全表 32 database

本文主要是介绍MySQL-32:全表扫描,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

全表扫描的概念: 数据库服务器用来搜寻表的每一条记录的过程,直到所有符合给定条件的记录返回为止。

32.1 全表扫描流程

例如,我们执行如下sql,对表t进行全表扫描,这条sql的目的就是将全表的结果发送给客户端。

select * from t

流程如下:

  1. 服务端内存中有个net_buffer,大小由参数net_buffer_length控制,默认大小为16K。
  2. 读取一行,写入net_buffer中,直到写满,调用网络接口发送出去。
  3. 如果发送成功,则清空net_buffer,重复上述动作。
  4. 如果发送函数返回 EAGAIN 或 WSAEWOULDBLOCK,就表示本地网络栈写满了,进入等待。直到网络栈重新可写,再继续发送。

这样子,就是说MySQL在进行全表扫描的时候,是边读边发的,最大的内存使用为net_buffer。

Sending to client 与 Sending data:

  • Sending data :可能处理执行器中的任意阶段,也就是语句正在执行中的意思。
  • Sending to client:表示服务端的网络栈写满了

一条查询语句的状态变化如下:

  1. MySQL 查询语句进入执行阶段后,首先把状态设置成“Sending data”;
  2. 发送执行结果的列相关的信息给客户端;
  3. 再继续执行语句的流程;执行完成后,把状态设置成空字符串。
32.2 全表扫描对 InnoDB 的影响

当一个更新语句过来,先更新内存中信息,再写binlog,后续有空再同步到磁盘,这就是WAL技术。但是这里有个内存命中率的问题,内存大小是有限的,但所有的数据也都已经在用时,是需要从在使用的内存页中选择一个出来,进行淘汰,这个选择的策略就是内存淘汰算法,MySQL使用的淘汰算法未LRU,最近未使用。

LRU:最近未使用淘汰算法 :使用链表来进行实现,将最近的使用的页面放在链表头,淘汰的时候,就会淘汰链表末尾的页面。示意图如下:
在这里插入图片描述

但是MySQL在进行全表扫描的时候,会导致内存命中率大大下降,也会导致内存页就行大换血。所以MySQL对LRU算法进行了改进。
将LRU的链表按照5:3的比例来进行分段,前面为young区域,后面未old区域,吼吼,怎么有点JVM的赶脚。

访问链表中节点方式如下:

  • 访问young区域内的节点,则将该页面转移到链表头

  • 访问old区域内的节点,需要进行如下判断

    • 若这个数据页在 LRU 链表中存在的时间超过了 1 秒,就把它移动到链表头部;
    • 如果这个数据页在 LRU 链表中存在的时间短于 1 秒,位置保持不变。1 秒这个时间,是由参数 innodb_old_blocks_time 控制的。其默认值是 1000,单位毫秒。
      在这里插入图片描述

这个算法简直就是为全表扫描量身定做的啊,全表扫描为顺序访问,一个数据页的访问时间不会超过一秒钟,也不会进行young区域,也会很快地淘汰出去。

这个算法的思想也就是将一条链表切成两段,执行两种操作模式,在确保正常应用的情况,在额外添加上其它功能。

这篇关于MySQL-32:全表扫描的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/805606

相关文章

MySQL 8 中的一个强大功能 JSON_TABLE示例详解

《MySQL8中的一个强大功能JSON_TABLE示例详解》JSON_TABLE是MySQL8中引入的一个强大功能,它允许用户将JSON数据转换为关系表格式,从而可以更方便地在SQL查询中处理J... 目录基本语法示例示例查询解释应用场景不适用场景1. ‌jsON 数据结构过于复杂或动态变化‌2. ‌性能要

MySQL字符串常用函数详解

《MySQL字符串常用函数详解》本文给大家介绍MySQL字符串常用函数,本文结合实例代码给大家介绍的非常详细,对大家学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录mysql字符串常用函数一、获取二、大小写转换三、拼接四、截取五、比较、反转、替换六、去空白、填充MySQL字符串常用函数一、

MySQL中比较运算符的具体使用

《MySQL中比较运算符的具体使用》本文介绍了SQL中常用的符号类型和非符号类型运算符,符号类型运算符包括等于(=)、安全等于(=)、不等于(/!=)、大小比较(,=,,=)等,感兴趣的可以了解一下... 目录符号类型运算符1. 等于运算符=2. 安全等于运算符<=>3. 不等于运算符<>或!=4. 小于运

虚拟机Centos7安装MySQL数据库实践

《虚拟机Centos7安装MySQL数据库实践》用户分享在虚拟机安装MySQL的全过程及常见问题解决方案,包括处理GPG密钥、修改密码策略、配置远程访问权限及防火墙设置,最终通过关闭防火墙和停止Net... 目录安装mysql数据库下载wget命令下载MySQL安装包安装MySQL安装MySQL服务安装完成

MySQL进行数据库审计的详细步骤和示例代码

《MySQL进行数据库审计的详细步骤和示例代码》数据库审计通过触发器、内置功能及第三方工具记录和监控数据库活动,确保安全、完整与合规,Java代码实现自动化日志记录,整合分析系统提升监控效率,本文给大... 目录一、数据库审计的基本概念二、使用触发器进行数据库审计1. 创建审计表2. 创建触发器三、Java

MySQL逻辑删除与唯一索引冲突解决方案

《MySQL逻辑删除与唯一索引冲突解决方案》本文探讨MySQL逻辑删除与唯一索引冲突问题,提出四种解决方案:复合索引+时间戳、修改唯一字段、历史表、业务层校验,推荐方案1和方案3,适用于不同场景,感兴... 目录问题背景问题复现解决方案解决方案1.复合唯一索引 + 时间戳删除字段解决方案2:删除后修改唯一字

Zabbix在MySQL性能监控方面的运用及最佳实践记录

《Zabbix在MySQL性能监控方面的运用及最佳实践记录》Zabbix通过自定义脚本和内置模板监控MySQL核心指标(连接、查询、资源、复制),支持自动发现多实例及告警通知,结合可视化仪表盘,可有效... 目录一、核心监控指标及配置1. 关键监控指标示例2. 配置方法二、自动发现与多实例管理1. 实践步骤

MySQL 主从复制部署及验证(示例详解)

《MySQL主从复制部署及验证(示例详解)》本文介绍MySQL主从复制部署步骤及学校管理数据库创建脚本,包含表结构设计、示例数据插入和查询语句,用于验证主从同步功能,感兴趣的朋友一起看看吧... 目录mysql 主从复制部署指南部署步骤1.环境准备2. 主服务器配置3. 创建复制用户4. 获取主服务器状态5

SpringBoot中六种批量更新Mysql的方式效率对比分析

《SpringBoot中六种批量更新Mysql的方式效率对比分析》文章比较了MySQL大数据量批量更新的多种方法,指出REPLACEINTO和ONDUPLICATEKEY效率最高但存在数据风险,MyB... 目录效率比较测试结构数据库初始化测试数据批量修改方案第一种 for第二种 case when第三种

MySql基本查询之表的增删查改+聚合函数案例详解

《MySql基本查询之表的增删查改+聚合函数案例详解》本文详解SQL的CURD操作INSERT用于数据插入(单行/多行及冲突处理),SELECT实现数据检索(列选择、条件过滤、排序分页),UPDATE... 目录一、Create1.1 单行数据 + 全列插入1.2 多行数据 + 指定列插入1.3 插入否则更