51. Python语言 的 MySQL数据库 之 第二十章 MySQL的 基准测试

2023-12-29 08:58

本文主要是介绍51. Python语言 的 MySQL数据库 之 第二十章 MySQL的 基准测试,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

MySQL的 基准测试

  • 本章主题
  • 关键词
  • 什么是基准测试
    • 基准测试特点
    • 压力测试特点
  • 基准测试的目的
  • 如何进行基准测试
    • 对整个系统进行基准测试
      • 优点
      • 缺点
    • 对MySQL进行基准测试
      • 优点
      • 缺点
    • MySQL基准测试的常见指标
  • MySQL基准测试工具
    • MySQL基准测试之mysqlslap
    • 常用参数说明
    • sysbench测试工具:
  • 总结小便条

本章主题

  

关键词

  

什么是基准测试

基准测试是一种测量和评估软件性能指标的活动用于建立某个时刻的性能基准,以便当系统发生软硬件变化时重新进行基准测试以评估变化对性能的影响。

基准测试是针对系统设置的一种压力测试

基准测试特点

直接、简单、易于比较,用于评估服务器的处理能力

可能不关心业务逻辑,所使用的查询和业务的真实性可以和业务环境没关系

压力测试特点

• 对真实的业务数据进行测试,获得真实系统所能承受的压力

• 需要针对不同主题,所使用的数据和查询也是真实用到的

• 基准测试是简化了的压力测试

  

基准测试的目的

• 建立MySQL服务器的性能基准线,确定当前MySQL服务器运行情况,确定优化之后的效果

• 模拟比当前系统更高的负载,已找出系统的扩展瓶颈,可以增加数据库并发,观察QPS(每秒处理的查询数),TPS(每秒处理的事务数)变化,确定并发量与性能最优的关系

• 测试不同的硬件、软件和操作系统配置

• 证明新的硬件设备是否配置正确

  

如何进行基准测试

对整个系统进行基准测试

优点

• 能够测试整个系统的性能,包括web服务器缓存、数据库等

• MySQL并不总是出现性能问题的瓶颈,如果只关注MySQL可能忽略其他问题,能反映出系统中各个组件接口间的性能问题体现真实性能状况

缺点

基准测试最重要的就是简单,可能对不同的方案进行测试,找到最优的方案,基准测试进行的时间一定要短,否则就要花费大量的时间进行基准测试

• 测试设计复杂,消耗时间长

  

对MySQL进行基准测试

优点

• 测试设计简单,所耗费时间短

缺点

• 无法全面了解整个系统的性能基线

  

MySQL基准测试的常见指标

• 单位时间内处理的事务数(TPS)

• 单位时间内处理的查询数(QPS)

  

MySQL基准测试工具

MySQL基准测试之mysqlslap

• 可以模拟服务器负载,并输出相关统计信息

  

常用参数说明

• --auto-generate-sql 由系统自动生成SQL脚本进行测试
• --auto-generate-sql-add-autoincrement 在生成的表中增加自增ID
• --auto-generate-sql-load-type 指定测试中使用的查询类型 读写或者混合,默认是混合
• --auto-generate-sql-write-number 指定初始化数据时生成的数据量
• --concurrency 指定并发线程的数量 1,10,50,200
• --engine 指定要测试表的存储引擎,可以用逗号分割多个存储引擎
• --no-drop 指定不清理测试数据
• --iterations 指定测试运行的次数 指定了这个不能指定no-drop
• --number-of-queries 指定每一个线程执行的查询数量
• --debug-info 指定输出额外的内存及CPU统计信息
• --number-int-cols 指定测试表中包含的INT类型列的数量
• --number-char-cols 指定测试表中包含的varchar类型的数量
• --create-schema 指定了用于执行测试的数据库的名字
• --query 用于指定自定义SQL的脚本
• --only-print 并不运行测试脚本,而是把生成的脚本打印出来

mysqlslap --concurrency=1,50,100,200 --iterations=3 --number-int-cols=5 --number-char-cols=5 --auto-generate-sql --auto-generate-sql-add-autoincrement --engine=myisam,innodb --number-of-queries=10 --create-schema=test

  

sysbench测试工具:

https://www.cnblogs.com/kismetv/archive/2017/09/30/7615738.html

MyISAMInnoDB
存储结构每张表被存放在三个文件:
1. frm-表格定义;
2. MYD(MYData)-数据文件;
3. MYI(MYIndex)-索引文件。
所有的表都保存在同一个数据文件中(也可能是多个文件,或者是独立的表空间文件),InnoDB表的大小只受限于操作系统文件的大小,一般为2GB
存储空间MyISAM可被压缩,存储空间较小InnoDB的表需要更多的内存和存储,它会在主内存中建立其专用的缓冲池用于高速缓冲数据和索引
可移植性、备份及恢复由于MyISAM的数据是以文件的形式存储,所以在跨平台的数据转移中会很方便。在备份和恢复时可单独针对某个表进行操作免费的方案可以是拷贝数据文件、备份 binlog,或者用 mysqldump,在数据量达到几十G的时候就相对痛苦了
事务安全不支持 每次查询具有原子性支持 具有事务(commit)、回滚(rollback)和崩溃修复能力(crash recovery capabilities)的事务安全(transaction-safe (ACID compliant))型表
AUTO_INCREMENTMyISAM表可以和其他字段一起建立联合索引InnoDB中必须包含只有该字段的索引
SELECTMyISAM更优
INSERTInnoDB更优
UPDATEInnoDB更优
DELETEInnoDB更优 它不会重新建立表,而是一行一行的删除
COUNT without WHEREMyISAM更优。因为MyISAM保存了表的具体行数InnoDB没有保存表的具体行数,需要逐行扫描统计,就很慢了
COUNT with WHERE一样一样,InnoDB也会锁表
只支持表锁支持表锁、行锁 行锁大幅度提高了多用户并发操作的新能。但是InnoDB的行锁,只是在WHERE的主键是有效的,非主键的WHERE都会锁全表的
外键不支持支持
FULLTEXT全文索引支持不支持 可以通过使用Sphinx从InnoDB中获得全文索引,会慢一点

  

总结小便条

本篇文章主要讲了以下几点内容:

  

  本章回顾暂时就到这了,如果还有点晕,那就把文章里所有引用的案例代码再敲几遍吧。拜拜~

这篇关于51. Python语言 的 MySQL数据库 之 第二十章 MySQL的 基准测试的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/549006

相关文章

Python结合Flask框架构建一个简易的远程控制系统

《Python结合Flask框架构建一个简易的远程控制系统》这篇文章主要为大家详细介绍了如何使用Python与Flask框架构建一个简易的远程控制系统,能够远程执行操作命令(如关机、重启、锁屏等),还... 目录1.概述2.功能使用系统命令执行实时屏幕监控3. BUG修复过程1. Authorization

MySQL常见的存储引擎和区别说明

《MySQL常见的存储引擎和区别说明》MySQL支持多种存储引擎,如InnoDB、MyISAM、MEMORY、Archive、CSV和Blackhole,每种引擎有其特点和适用场景,选择存储引擎时需根... 目录mysql常见的存储引擎和区别说明1. InnoDB2. MyISAM3. MEMORY4. A

Python使用DeepSeek进行联网搜索功能详解

《Python使用DeepSeek进行联网搜索功能详解》Python作为一种非常流行的编程语言,结合DeepSeek这一高性能的深度学习工具包,可以方便地处理各种深度学习任务,本文将介绍一下如何使用P... 目录一、环境准备与依赖安装二、DeepSeek简介三、联网搜索与数据集准备四、实践示例:图像分类1.

StarRocks数据库详解(什么是StarRocks)

《StarRocks数据库详解(什么是StarRocks)》StarRocks是一个高性能的全场景MPP数据库,支持多种数据导入导出方式,包括Spark、Flink、Hadoop等,它采用分布式架构,... 目录StarRocks介绍什么是StarRocks?StarRocks适合什么场景?StarRock

Python中__new__()方法适应及注意事项详解

《Python中__new__()方法适应及注意事项详解》:本文主要介绍Python中__new__()方法适应及注意事项的相关资料,new()方法是Python中的一个特殊构造方法,用于在创建对... 目录前言基本用法返回值单例模式自定义对象创建注意事项总结前言new() 方法在 python 中是一个

Python批量调整Word文档中的字体、段落间距及格式

《Python批量调整Word文档中的字体、段落间距及格式》这篇文章主要为大家详细介绍了如何使用Python的docx库来批量处理Word文档,包括设置首行缩进、字体、字号、行间距、段落对齐方式等,需... 目录关键代码一级标题设置  正文设置完整代码运行结果最近关于批处理格式的问题我查了很多资料,但是都没

Python依赖库的几种离线安装方法总结

《Python依赖库的几种离线安装方法总结》:本文主要介绍如何在Python中使用pip工具进行依赖库的安装和管理,包括如何导出和导入依赖包列表、如何下载和安装单个或多个库包及其依赖,以及如何指定... 目录前言一、如何copy一个python环境二、如何下载一个包及其依赖并安装三、如何导出requirem

Windows环境下安装达梦数据库的完整步骤

《Windows环境下安装达梦数据库的完整步骤》达梦数据库的安装大致分为Windows和Linux版本,本文将以dm8企业版Windows_64位环境为例,为大家介绍一下达梦数据库的具体安装步骤吧... 目录环境介绍1 下载解压安装包2 根据安装手册安装2.1 选择语言 时区2.2 安装向导2.3 接受协议

Mysql中InnoDB与MyISAM索引差异详解(最新整理)

《Mysql中InnoDB与MyISAM索引差异详解(最新整理)》InnoDB和MyISAM在索引实现和特性上有差异,包括聚集索引、非聚集索引、事务支持、并发控制、覆盖索引、主键约束、外键支持和物理存... 目录1. 索引类型与数据存储方式InnoDBMyISAM2. 事务与并发控制InnoDBMyISAM

python中列表list切分的实现

《python中列表list切分的实现》列表是Python中最常用的数据结构之一,经常需要对列表进行切分操作,本文主要介绍了python中列表list切分的实现,文中通过示例代码介绍的非常详细,对大家... 目录一、列表切片的基本用法1.1 基本切片操作1.2 切片的负索引1.3 切片的省略二、列表切分的高