Python捕捉MySQL的警告导致的事物锁等待超时问题

2024-06-15 00:48

本文主要是介绍Python捕捉MySQL的警告导致的事物锁等待超时问题,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

当有多个进程相对高并发的读取删除数据库的时候,经常会出现事物锁锁死,导致锁等待时间超时的致命错误。
翻看日志,可以查看到最早出现的是以下错误

InternalError(1205, 'Lock wait timeout exceeded; try restarting transaction')

但是该错误提示仅仅出现了几次,之后会不断的出现下面的错误提示

OperationalError(2013, 'Lost connection to MySQL server during query')

到最后就干脆变为

InterfaceError("(0, '')",)

对于数据库的了解并不深,一开始以为就是MySQL无法承受高并发,但是感觉MySQL应该没那么弱。
翻阅了MySQL的日志之后,可以看到以下警告和错误信息

2017-12-01T09:42:11.954799Z 0 [Warning] Changed limits: max_open_files: 1024 (requested 5000)
2017-12-01T09:42:11.954862Z 0 [Warning] Changed limits: table_open_cache: 431 (requested 2000)
2017-12-01T09:42:12.191029Z 0 [Warning] TIMESTAMP with implicit DEFAULT value is deprecated. Please use --explicit_defaults_for_timestamp server option (see documentation for more details).
2017-12-01T09:42:15.371812Z 0 [ERROR] /usr/sbin/mysqld: Table './mysql/user' is marked as crashed and should be repaired
2017-12-01T09:42:15.372197Z 0 [Warning] Checking table:   './mysql/user'
2017-12-01T09:42:15.372222Z 0 [ERROR] 1 client is using or hasn't closed the table properly
2017-12-01T09:42:15.421626Z 0 [ERROR] /usr/sbin/mysqld: Table './mysql/db' is marked as crashed and should be repaired
2017-12-01T09:42:15.421836Z 0 [Warning] Checking table:   './mysql/db'
2017-12-01T09:42:15.421850Z 0 [ERROR] 1 client is using or hasn't closed the table properly

看着这错误提示,感觉也是很莫名其妙了。并没有打开很大量的文件丫。一条一条Google下去之后也没有找到任何有效的解决信息。
此时回顾该错误,锁等待超时,说明发现了死锁。但是代码中对于数据库的调用,并不会存在任何的死锁问题,互相是不干扰的丫。
好一阵思考之后,感觉可能是,执行了某个SQL语句,但是该语句并没有提交过去,所以卡住了。
之后再去看代码,发现我为了能够捕捉到警告,将SQLwarning提升为了错误

from warnings import filterwarnings
filterwarnings('error', category=pm.Warning)

我这时候就意识到是这里的问题了。
对于MySQL的警告,尽管有警告,但还是能够顺利正常的运行的。然而我直接将其捕捉打印了出来,恰恰缺少了commit
所以问题应该就出在这里,所以修改了一下代码。在捕捉警告之前先commit一下。这时发现数据库不会再挂掉了。

这篇关于Python捕捉MySQL的警告导致的事物锁等待超时问题的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1061960

相关文章

揭秘Python Socket网络编程的7种硬核用法

《揭秘PythonSocket网络编程的7种硬核用法》Socket不仅能做聊天室,还能干一大堆硬核操作,这篇文章就带大家看看Python网络编程的7种超实用玩法,感兴趣的小伙伴可以跟随小编一起... 目录1.端口扫描器:探测开放端口2.简易 HTTP 服务器:10 秒搭个网页3.局域网游戏:多人联机对战4.

springboot循环依赖问题案例代码及解决办法

《springboot循环依赖问题案例代码及解决办法》在SpringBoot中,如果两个或多个Bean之间存在循环依赖(即BeanA依赖BeanB,而BeanB又依赖BeanA),会导致Spring的... 目录1. 什么是循环依赖?2. 循环依赖的场景案例3. 解决循环依赖的常见方法方法 1:使用 @La

使用Python实现快速搭建本地HTTP服务器

《使用Python实现快速搭建本地HTTP服务器》:本文主要介绍如何使用Python快速搭建本地HTTP服务器,轻松实现一键HTTP文件共享,同时结合二维码技术,让访问更简单,感兴趣的小伙伴可以了... 目录1. 概述2. 快速搭建 HTTP 文件共享服务2.1 核心思路2.2 代码实现2.3 代码解读3.

MySQL双主搭建+keepalived高可用的实现

《MySQL双主搭建+keepalived高可用的实现》本文主要介绍了MySQL双主搭建+keepalived高可用的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,... 目录一、测试环境准备二、主从搭建1.创建复制用户2.创建复制关系3.开启复制,确认复制是否成功4.同

Python使用自带的base64库进行base64编码和解码

《Python使用自带的base64库进行base64编码和解码》在Python中,处理数据的编码和解码是数据传输和存储中非常普遍的需求,其中,Base64是一种常用的编码方案,本文我将详细介绍如何使... 目录引言使用python的base64库进行编码和解码编码函数解码函数Base64编码的应用场景注意

MyBatis 动态 SQL 优化之标签的实战与技巧(常见用法)

《MyBatis动态SQL优化之标签的实战与技巧(常见用法)》本文通过详细的示例和实际应用场景,介绍了如何有效利用这些标签来优化MyBatis配置,提升开发效率,确保SQL的高效执行和安全性,感... 目录动态SQL详解一、动态SQL的核心概念1.1 什么是动态SQL?1.2 动态SQL的优点1.3 动态S

Python基于wxPython和FFmpeg开发一个视频标签工具

《Python基于wxPython和FFmpeg开发一个视频标签工具》在当今数字媒体时代,视频内容的管理和标记变得越来越重要,无论是研究人员需要对实验视频进行时间点标记,还是个人用户希望对家庭视频进行... 目录引言1. 应用概述2. 技术栈分析2.1 核心库和模块2.2 wxpython作为GUI选择的优

Mysql表的简单操作(基本技能)

《Mysql表的简单操作(基本技能)》在数据库中,表的操作主要包括表的创建、查看、修改、删除等,了解如何操作这些表是数据库管理和开发的基本技能,本文给大家介绍Mysql表的简单操作,感兴趣的朋友一起看... 目录3.1 创建表 3.2 查看表结构3.3 修改表3.4 实践案例:修改表在数据库中,表的操作主要

Python如何使用__slots__实现节省内存和性能优化

《Python如何使用__slots__实现节省内存和性能优化》你有想过,一个小小的__slots__能让你的Python类内存消耗直接减半吗,没错,今天咱们要聊的就是这个让人眼前一亮的技巧,感兴趣的... 目录背景:内存吃得满满的类__slots__:你的内存管理小助手举个大概的例子:看看效果如何?1.

Python+PyQt5实现多屏幕协同播放功能

《Python+PyQt5实现多屏幕协同播放功能》在现代会议展示、数字广告、展览展示等场景中,多屏幕协同播放已成为刚需,下面我们就来看看如何利用Python和PyQt5开发一套功能强大的跨屏播控系统吧... 目录一、项目概述:突破传统播放限制二、核心技术解析2.1 多屏管理机制2.2 播放引擎设计2.3 专