MySQL数据类型和Schema优化(二)

2024-09-07 10:58

本文主要是介绍MySQL数据类型和Schema优化(二),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

MySQL数据类型和Schema优化

  • MySQL
    • 合适的数据类型
      • 日期和时间类型(datetime、timesamp)
      • 整数类型
      • 实数类型(float\double\decimal)
      • 字符串类型(Varchar、Char)
    • Schema设计
    • 缓存表和汇总表

MySQL

良好的逻辑设计与物理设计是高性能的基石,应该根据具体业务需求的查询语句来设计schema,这往往需要权衡各种因素。

比如,反范式的设计可能会增加某些查询的速度,但也会带来数据同步的维护工作。

合适的数据类型

MYSQL支持的数据类型非常多,选择合适的数据类型将有助于MySQL的性能提升。

一般遵循以下规则:

  1. 更小的数据类型
  2. 简单的数据类型
  3. 尽量避免NULL

更小的数据类型,意味着占用更小的磁盘、内存、CPU缓存等,当然一个比较重要的前提是对类型要有合理的预估,毕竟对类型的变更是一项痛苦的事情,alter table操作会锁住整个表。

简单的数据类型,意味着MySQL更少的处理,占用更少的CPU周期,比如整型比字符串操作代价更低,字符串需要处理字符集和校对规则(排序规则),使得字符串的处理更加复杂。

尽量避免NULL,如果没有指定列是否为NULL,MySQL默认设置列为NULL。一般可以的话推荐设置Not Null,因为使用NULL对于MySQL更难优化。当为NULL的列被索引时,每个索引记录需要一个额外的字节。
在这里插入图片描述

日期和时间类型(datetime、timesamp)

  • datetime 使用8个字节存储、timesamp使用4个字节存储
  • datetime取值范围1001-9999年,timesamp取值范围在1970-2038年
  • datetime没有时区概念,timesamp有时区的概念

注意:timesamp时区问题,可能会导致CPU耗尽。前提是设置time_zone=system,该设置会获取系统的时区配置,并且获取操作是全局锁,高并发的情况下会导致CPU耗尽。

整数类型

tinyint、smallint、mediumint、int、bigint

  • 存储空间不同,由小到大分别是8,16,24,32,64位
  • 整数类型可以设置UNSIGNED属性,表示无负数,正数取值可以扩大一倍,并且存储空间不变
  • int(1) 和 int(11) 并不会改变取值范围,只是决定客户端显示的长度

实数类型(float\double\decimal)

  • float\double支持标准的浮点数运算进行近似计算,不能精确表达
  • float\double是CPU支持原生的浮点数计算,性能速度很快
  • decimal是mysql支持的类型,支持精确的浮点数。
  • decimal精确度要求比较高,比如财务数据可以选择使用
  • decimal需要复杂的计算,性能相对比较差
  • 数据量比较大的情况下,可以考虑使用bigint代替,通过乘相应小数点的倍数,比如100000000.1111 ,存储1000000001111,通过乘10000来解决,避免decimal复杂的计算代价。

字符串类型(Varchar、Char)

  • Varchar是可变长字符串,它比定长字符串更节省空间,因为它可以合理利用空间,只使用必要的空间。
  • Varchar需要额外的字节记录字符串的长度,如果长度超过255则使用2个字节,否则使用1个字节
  • Varchar由于可变长,如果长度增加同时当前页没有空间存储,InnoDB需要分裂页存储,导致碎片产生。
  • Char是定长字符串,对于固定长度的比如MD5加密串,非常适合使用Char进行存储,同时定长Char在更新时不容易产生碎片,存储空间上Char也不需要记录额外的长度,Varchar则需要使用1-2字节记录长度。

Schema设计

  • 太多的列:MySQL存储引擎API工作时需要在服务器层和存储引擎之间通过行数据格式拷贝数据,然后在服务器层将缓存行内容解码各个列。这个代价时非常高的;比如尽量避免使用select * 操作.

  • 范式与反范式:
    范式化的更新操作通常比反范式化要快,因为较好的范式化可以很少的或者没有重复数据,更新只要少部分的数据。
    举例子(错误的范式):

departmentemployeeleader
A小明王总
A小李王总
当需要修改部门领导时,需要更新两条数据,如果遵循范式化,再新增一个部门和领导的实体表,则只需要更新一条数据即可同时可以避免一些group by,distinct等操作,比如上面案例需要统计所有部门,就需要通过group by操作。

范式化的缺点是需要多表关联,稍微复杂一点可能就需要关联才能查询,此时可能会通过一些反范式的手段,减少关联查询。常用的做法就是在另一个表,保存相同的列。

通常设计是混用模式:范式+反范式配合使用
在这里插入图片描述

缓存表和汇总表

缓存表和汇总表没有标准的定义,通常来说缓存表来表示存储那些可以比较简单地从其他表schema获取(但是每次获取比较慢),可以通过缓存冗余数据,避免从其他表查询。

汇总表可以优先计算出结果,直接使用简单方式进行查询,减少实时查询计算的性能问题。

Java题库在线答题:www.51ctofx.com

这篇关于MySQL数据类型和Schema优化(二)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1144872

相关文章

C#使用HttpClient进行Post请求出现超时问题的解决及优化

《C#使用HttpClient进行Post请求出现超时问题的解决及优化》最近我的控制台程序发现有时候总是出现请求超时等问题,通常好几分钟最多只有3-4个请求,在使用apipost发现并发10个5分钟也... 目录优化结论单例HttpClient连接池耗尽和并发并发异步最终优化后优化结论我直接上优化结论吧,

Java内存泄漏问题的排查、优化与最佳实践

《Java内存泄漏问题的排查、优化与最佳实践》在Java开发中,内存泄漏是一个常见且令人头疼的问题,内存泄漏指的是程序在运行过程中,已经不再使用的对象没有被及时释放,从而导致内存占用不断增加,最终... 目录引言1. 什么是内存泄漏?常见的内存泄漏情况2. 如何排查 Java 中的内存泄漏?2.1 使用 J

MySQL中时区参数time_zone解读

《MySQL中时区参数time_zone解读》MySQL时区参数time_zone用于控制系统函数和字段的DEFAULTCURRENT_TIMESTAMP属性,修改时区可能会影响timestamp类型... 目录前言1.时区参数影响2.如何设置3.字段类型选择总结前言mysql 时区参数 time_zon

Python MySQL如何通过Binlog获取变更记录恢复数据

《PythonMySQL如何通过Binlog获取变更记录恢复数据》本文介绍了如何使用Python和pymysqlreplication库通过MySQL的二进制日志(Binlog)获取数据库的变更记录... 目录python mysql通过Binlog获取变更记录恢复数据1.安装pymysqlreplicat

使用SQL语言查询多个Excel表格的操作方法

《使用SQL语言查询多个Excel表格的操作方法》本文介绍了如何使用SQL语言查询多个Excel表格,通过将所有Excel表格放入一个.xlsx文件中,并使用pandas和pandasql库进行读取和... 目录如何用SQL语言查询多个Excel表格如何使用sql查询excel内容1. 简介2. 实现思路3

Rust 数据类型详解

《Rust数据类型详解》本文介绍了Rust编程语言中的标量类型和复合类型,标量类型包括整数、浮点数、布尔和字符,而复合类型则包括元组和数组,标量类型用于表示单个值,具有不同的表示和范围,本文介绍的非... 目录一、标量类型(Scalar Types)1. 整数类型(Integer Types)1.1 整数字

Mysql DATETIME 毫秒坑的解决

《MysqlDATETIME毫秒坑的解决》本文主要介绍了MysqlDATETIME毫秒坑的解决,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着... 今天写代码突发一个诡异的 bug,代码逻辑大概如下。1. 新增退款单记录boolean save = s

mysql-8.0.30压缩包版安装和配置MySQL环境过程

《mysql-8.0.30压缩包版安装和配置MySQL环境过程》该文章介绍了如何在Windows系统中下载、安装和配置MySQL数据库,包括下载地址、解压文件、创建和配置my.ini文件、设置环境变量... 目录压缩包安装配置下载配置环境变量下载和初始化总结压缩包安装配置下载下载地址:https://d

MySQL中的锁和MVCC机制解读

《MySQL中的锁和MVCC机制解读》MySQL事务、锁和MVCC机制是确保数据库操作原子性、一致性和隔离性的关键,事务必须遵循ACID原则,锁的类型包括表级锁、行级锁和意向锁,MVCC通过非锁定读和... 目录mysql的锁和MVCC机制事务的概念与ACID特性锁的类型及其工作机制锁的粒度与性能影响多版本

MYSQL行列转置方式

《MYSQL行列转置方式》本文介绍了如何使用MySQL和Navicat进行列转行操作,首先,创建了一个名为`grade`的表,并插入多条数据,然后,通过修改查询SQL语句,使用`CASE`和`IF`函... 目录mysql行列转置开始列转行之前的准备下面开始步入正题总结MYSQL行列转置环境准备:mysq