MySQL当表中新增加字段的时候,如何将该字段的值进行快速刷新成对应的值

2024-08-26 18:52

本文主要是介绍MySQL当表中新增加字段的时候,如何将该字段的值进行快速刷新成对应的值,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

背景

我有两个表,表usde_credits(积分表)和表usde_user(用户表),现在需要在usde_credits表中新增加一个user_id的字段,这个字段的值对应的就是usde_user表中的user_id的值,加上字段后,还需要将对应的值刷新到字段中。这两个表之间的关系目前是通过wallet_address来关联的。

解决

因为我有很多的表都需要增加这个字段,而且好友好几套环境的数据,并且目前使用的人很少,所以我不想通过写程序去批量更新,因为还要写代码(🥹)。所以想着通过SQL去快速处理。于是我写了如下的SQL:

UPDATE usde_credits uc
JOIN usde_user uu ON uc.wallet_address = uu.wallet_address
SET uc.user_id = uu.user_id
WHERE uc.user_id IS NULL;

但是我发现这样执行很慢,因为我的表中我查询了下有80多万条数据,而且我的MySQL服务器的性能并不是很好,虽然关联条件我加了索引,但是还是很慢,于是想到了以下几种办法:

  1. 分批更新

    UPDATE usde_credits uc
    JOIN usde_user uu ON uc.wallet_address = uu.wallet_address
    SET uc.user_id = uu.user_id
    WHERE uc.user_id IS NULL AND uc.id BETWEEN ? AND ?;
    
  2. 限制每次更新的数量

    UPDATE usde_credits uc
    JOIN usde_user uu ON uc.wallet_address = uu.wallet_address
    SET uc.user_id = uu.user_id
    WHERE uc.user_id IS NULL
    LIMIT 10000;
    
  3. 使用临时表或者视图

    CREATE TEMPORARY TABLE temp_update AS
    SELECT uc.id, uu.user_id
    FROM usde_credits uc
    JOIN usde_user uu ON uc.wallet_address = uu.wallet_address
    WHERE uc.user_id IS NULL;UPDATE usde_credits uc
    JOIN temp_update tu ON uc.id = tu.id
    SET uc.user_id = tu.user_id;
    

我直接选择了第三种,使用临时表的办法。
针对这种情况创建临时表相比其它两个办法是有优点的。当你直接更新主表时,尤其是涉及大量数据更新时,主表可能会被锁定较长时间,影响其他查询或更新操作。通过先创建临时表进行数据准备,再更新主表,可以减少主表的锁定时间。而且还能减少对主表的多次扫描操作。
而且前两种办法还是需要人工更改数量啊😓。

通过以上的SQL,创建临时表很快,大几秒钟就能完成了,而更新的操作,虽然经历了1分多钟,对于我的MySQL的配置,服务器的配置,已经完全能接受了,已经很快了。

注意事项
当然使用临时表也还是有一些需要注意的问题:

  • 如果临时表的数据量很大,创建和操作临时表本身也会消耗资源,因此在表的大小和系统资源允许的情况下使用。
  • 给临时表上的关键字段创建索引,还可以进一步提升操作速度
  • 临时表是会话范围的,在当前数据库连接关闭后会自动删除,适合一次性的批量操作。

这篇关于MySQL当表中新增加字段的时候,如何将该字段的值进行快速刷新成对应的值的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1109392

相关文章

MySQL的JDBC编程详解

《MySQL的JDBC编程详解》:本文主要介绍MySQL的JDBC编程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录前言一、前置知识1. 引入依赖2. 认识 url二、JDBC 操作流程1. JDBC 的写操作2. JDBC 的读操作总结前言本文介绍了mysq

java.sql.SQLTransientConnectionException连接超时异常原因及解决方案

《java.sql.SQLTransientConnectionException连接超时异常原因及解决方案》:本文主要介绍java.sql.SQLTransientConnectionExcep... 目录一、引言二、异常信息分析三、可能的原因3.1 连接池配置不合理3.2 数据库负载过高3.3 连接泄漏

Linux下MySQL数据库定时备份脚本与Crontab配置教学

《Linux下MySQL数据库定时备份脚本与Crontab配置教学》在生产环境中,数据库是核心资产之一,定期备份数据库可以有效防止意外数据丢失,本文将分享一份MySQL定时备份脚本,并讲解如何通过cr... 目录备份脚本详解脚本功能说明授权与可执行权限使用 Crontab 定时执行编辑 Crontab添加定

mybatis-plus如何根据任意字段saveOrUpdateBatch

《mybatis-plus如何根据任意字段saveOrUpdateBatch》MyBatisPlussaveOrUpdateBatch默认按主键判断操作类型,若需按其他唯一字段(如agentId、pe... 目录使用场景方法源码方法改造首先在service层定义接口service层接口实现总结使用场景my

MySQL中On duplicate key update的实现示例

《MySQL中Onduplicatekeyupdate的实现示例》ONDUPLICATEKEYUPDATE是一种MySQL的语法,它在插入新数据时,如果遇到唯一键冲突,则会执行更新操作,而不是抛... 目录1/ ON DUPLICATE KEY UPDATE的简介2/ ON DUPLICATE KEY UP

MySQL分库分表的实践示例

《MySQL分库分表的实践示例》MySQL分库分表适用于数据量大或并发压力高的场景,核心技术包括水平/垂直分片和分库,需应对分布式事务、跨库查询等挑战,通过中间件和解决方案实现,最佳实践为合理策略、备... 目录一、分库分表的触发条件1.1 数据量阈值1.2 并发压力二、分库分表的核心技术模块2.1 水平分

Python与MySQL实现数据库实时同步的详细步骤

《Python与MySQL实现数据库实时同步的详细步骤》在日常开发中,数据同步是一项常见的需求,本篇文章将使用Python和MySQL来实现数据库实时同步,我们将围绕数据变更捕获、数据处理和数据写入这... 目录前言摘要概述:数据同步方案1. 基本思路2. mysql Binlog 简介实现步骤与代码示例1

使用shardingsphere实现mysql数据库分片方式

《使用shardingsphere实现mysql数据库分片方式》本文介绍如何使用ShardingSphere-JDBC在SpringBoot中实现MySQL水平分库,涵盖分片策略、路由算法及零侵入配置... 目录一、ShardingSphere 简介1.1 对比1.2 核心概念1.3 Sharding-Sp

MySQL 表空却 ibd 文件过大的问题及解决方法

《MySQL表空却ibd文件过大的问题及解决方法》本文给大家介绍MySQL表空却ibd文件过大的问题及解决方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考... 目录一、问题背景:表空却 “吃满” 磁盘的怪事二、问题复现:一步步编程还原异常场景1. 准备测试源表与数据

Mac电脑如何通过 IntelliJ IDEA 远程连接 MySQL

《Mac电脑如何通过IntelliJIDEA远程连接MySQL》本文详解Mac通过IntelliJIDEA远程连接MySQL的步骤,本文通过图文并茂的形式给大家介绍的非常详细,感兴趣的朋友跟... 目录MAC电脑通过 IntelliJ IDEA 远程连接 mysql 的详细教程一、前缀条件确认二、打开 ID