XtraBackup 实现不停机不锁表搭建mysql主从

2024-02-14 10:58
文章标签 实现 mysql 搭建 主从 database xtrabackup 停机 不锁表

本文主要是介绍XtraBackup 实现不停机不锁表搭建mysql主从，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

简介

Xtrabackup是由 Percona 开发的一个开源软件，可实现对 InnoDB 的数据备份，支持在线热备份（备份时不影响数据读写）。备份时，Xtrabackup 会将 Master 的 binlog 信息记录在 xtrabackup_slave_info 文件中，通过此信息可以方便的搭建主从复制。

XtraBackup 有两个工具：xtrabackup 和 innobackupex：

  • xtrabackup 本身只能备份 InnoDB 和 XtraDB ，不能备份 MyISAM；
  • innobackupex 本身是 Hot Backup 脚本修改而来，同时可以备份 MyISAM 和 InnoDB，但是备份 MyISAM 需要加读锁。

官网：http://www.percona.com/software/percona-xtrabackup
文档：http://www.percona.com/doc/percona-xtrabackup/2.2/index.html

注：本文服务器环境为 CentOS，其他环境请自行修改实现。

修改主库、从库 MySQL 配置文件

1、Master

vim /etc/my.cnf

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-setting">datadir=<span class="hljs-value">/var/lib/mysql</span></span>
<span class="hljs-setting">server-id=<span class="hljs-value"><span class="hljs-number" style="color: rgb(42, 161, 152);">1</span></span></span>
<span class="hljs-setting">log-bin=<span class="hljs-value">mysql-bin</span></span>
</code>

2、Slave:

vim /etc/my.cnf

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-setting">server-id=<span class="hljs-value"><span class="hljs-number" style="color: rgb(42, 161, 152);">2</span></span></span>
<span class="hljs-setting">datadir=<span class="hljs-value">/var/lib/mysql</span></span>
</code>

安装 XtraBackup

1、添加源

yum install http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm

检查是否添加成功：

yum list | grep percona

如果执行正确，其输出信息通常类似：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;">percona-<span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">release</span>.x86_64                     <span class="hljs-number" style="color: rgb(42, 161, 152);">0.0</span>-<span class="hljs-number" style="color: rgb(42, 161, 152);">1</span>                       installed
...
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-client-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64            <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-devel-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64             <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">server</span>-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64            <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-shared-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64            <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-test-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64              <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
...
xtrabackup.x86_64                          <span class="hljs-number" style="color: rgb(42, 161, 152);">1.2</span>-<span class="hljs-number" style="color: rgb(42, 161, 152);">22.</span>rhel5                percona
</span></code>

2、安装 xtrabackup

yum install percona-xtrabackup

创建备份

innobackupex --user=DBUSER --password=DBUSERPASS /path/to/BACKUP-DIR/

如果执行正确，其输出信息通常类似：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;">innobackupex: <span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">Backup</span> created <span class="hljs-keyword" style="color: rgb(133, 153, 0);">in</span> directory <span class="hljs-string" style="color: rgb(42, 161, 152);">'/path/to/BACKUP-DIR/2015-03-03_00-00-09'</span>
innobackupex: MySQL <span class="hljs-keyword" style="color: rgb(133, 153, 0);">binlog</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">position</span>: filename <span class="hljs-string" style="color: rgb(42, 161, 152);">'mysql-bin.000003'</span>, <span class="hljs-keyword" style="color: rgb(133, 153, 0);">position</span> <span class="hljs-number" style="color: rgb(42, 161, 152);">1946</span>
<span class="hljs-number" style="color: rgb(42, 161, 152);">111225</span> <span class="hljs-number" style="color: rgb(42, 161, 152);">00</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">00</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">53</span>  innobackupex: completed OK!
</span></code>

备份时，innobackupex 会调用 xtrabackup 备份 InnoDB 表的数据，并且会复制 MyISAM, MERGE，CSV 和 ARCHIVE 表的表定义文件（.frm 文件）、数据文件。同时还会备份触发器和数据库配置信息相关的文件。这些文件将会保存在指定备份目录中一个以时间戳命名的目录下。

准备备份

一般情况下，在备份完成后，数据尚且不能用于恢复操作，因为备份的数据中可能会包含尚未提交的事务或已经提交但尚未同步至数据文件中的事务。因此，此时数据文件仍处理不一致状态。“准备”的主要作用正是通过回滚未提交的事务及同步已经提交的事务至数据文件也使得数据文件处于一致性状态。

innobackupex --apply-log /path/to/BACKUP-DIR

如果执行正确，其最后输出的几行信息通常如下：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;">xtrabackup: starting <span class="hljs-keyword" style="color: rgb(133, 153, 0);">shutdown</span> with innodb_fast_shutdown = <span class="hljs-number" style="color: rgb(42, 161, 152);">1</span>
<span class="hljs-number" style="color: rgb(42, 161, 152);">120407</span>  <span class="hljs-number" style="color: rgb(42, 161, 152);">9</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">01</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">36</span>  InnoDB: Starting <span class="hljs-keyword" style="color: rgb(133, 153, 0);">shutdown</span>...
<span class="hljs-number" style="color: rgb(42, 161, 152);">120407</span>  <span class="hljs-number" style="color: rgb(42, 161, 152);">9</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">01</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">40</span>  InnoDB: Shutdown completed; <span class="hljs-keyword" style="color: rgb(133, 153, 0);">log</span> sequence number <span class="hljs-number" style="color: rgb(42, 161, 152);">92036620</span>
<span class="hljs-number" style="color: rgb(42, 161, 152);">120407</span> 09:<span class="hljs-number" style="color: rgb(42, 161, 152);">01</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">40</span>  innobackupex: completed OK!
</code>

在实现“准备”的过程中，innobackupex 通常还可以使用 --use-memory 选项来指定其可以使用的内存的大小，默认通常为 100M。如果有足够的内存可用，可以多划分一些内存给 prepare 的过程，以提高其完成速度。

恢复备份

将数据复制到从服务器上：
scp -r /path/to/BACKUP-DIR root@slave_host:/data/

在从服务器中恢复备份数据：
innobackupex --copy-back /path/to/BACKUP-DIR

如果服务器剩余空间不足，你可以使用 --move-back 替换掉 --copy-back。

如果执行正确，其输出信息的最后几行通常如下：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;">innobackupex: Starting to copy InnoDB <span class="hljs-built_in" style="color: rgb(38, 139, 210);">log</span> files
innobackupex: <span class="hljs-keyword" style="color: rgb(133, 153, 0);">in</span> <span class="hljs-string" style="color: rgb(42, 161, 152);">'/backup/2012-04-07_08-17-03'</span>
innobackupex: back to original InnoDB <span class="hljs-built_in" style="color: rgb(38, 139, 210);">log</span> directory <span class="hljs-string" style="color: rgb(42, 161, 152);">'/mydata/data'</span>
innobackupex: Finished copying back files.
...
<span class="hljs-number" style="color: rgb(42, 161, 152);">120407</span> <span class="hljs-number" style="color: rgb(42, 161, 152);">09</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">36</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">10</span>  innobackupex: completed OK!
</code>

启动从库 MySQL，设置主库信息

当数据恢复至数据目录以后，还需要确保所有数据文件的属主和属组均为正确的用户，如mysql，否则，在启动mysqld之前还需要事先修改数据文件的属主和属组。如：

chown -R mysql:mysql /mydata/data/

启动从库：

/etc/init.d/mysqld start

在主库中开设主从用的账号和权限：

GRANT REPLICATION SLAVE ON *.* TO 'slave'@'192.168.0.1' IDENTIFIED BY 'slave';

查看备份文件 xtrabackup_binlog_info 中的日志文件以及position。

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">CHANGE</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">MASTER</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">TO</span>
MASTER_HOST=<span class="hljs-string" style="color: rgb(42, 161, 152);">'<master_host>'</span>,
MASTER_USER=<span class="hljs-string" style="color: rgb(42, 161, 152);">'<slave_username>'</span>,
MASTER_PASSWORD=<span class="hljs-string" style="color: rgb(42, 161, 152);">'<slave_password>'</span>,
MASTER_LOG_FILE=<span class="hljs-string" style="color: rgb(42, 161, 152);">'<see xtrabackup_binlog_info>'</span>,
MASTER_LOG_POS=<see xtrabackup_binlog_info>;</span>
</code>

开启主从同步：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">START</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">SLAVE</span>;</span>
</code>

查看从库状态：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">SHOW</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">SLAVE</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">STATUS</span>;</span>
</code>

Ps：用 innobackupex 备份数据时，–apply-log 处理过的备份数据里有两个文件说明该备份数据对应的 binlog 的文件名和位置。但有时这俩文件说明的位置可能会不同。
1 对于纯 InnoDB 操作，备份出来的数据中上述两个文件的内容是一致的
2 对于 InnoDB 和非事务存储引擎混合操作，xtrabackup_binlog_info 中所示的 position 应该会比 xtrabackup_pos_innodb 所示的数值大。此时应以 xtrabackup_binlog_info 为准；而后者和 apply-log 时 InnoDB recovery log 中显示的内容是一致的，只针对 InnoDB 这部分数据。

Ps2:启动 MySQL 时，遇到权限问题的解决方法：

报错信息：

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-number" style="color: rgb(42, 161, 152);">150430</span> <span class="hljs-number" style="color: rgb(42, 161, 152);">14</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">41</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">16</span>  <span class="hljs-attribute" style="color: rgb(181, 137, 0);">InnoDB</span>: Operating system error number <span class="hljs-number" style="color: rgb(42, 161, 152);">13</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">in</span> a file operation.
<span class="hljs-attribute" style="color: rgb(181, 137, 0);">InnoDB</span>: The error means mysqld does <span class="hljs-keyword" style="color: rgb(133, 153, 0);">not</span> have the access rights to
<span class="hljs-attribute" style="color: rgb(181, 137, 0);">InnoDB</span>: the directory.
</code>

解决方法：
chown -R mysql:mysql /home/data/mysql
chcon -R -t mysqld_db_t /home/mysql

这篇关于XtraBackup 实现不停机不锁表搭建mysql主从的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！


http://www.chinasem.cn/article/708304。

相关文章

如何使用Java实现请求deepseek

如何使用Java实现请求deepseek

《如何使用Java实现请求deepseek》这篇文章主要为大家详细介绍了如何使用Java实现请求deepseek功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录1.deepseek的api创建2.Java实现请求deepseek2.1 pom文件2.2 json转化文件2.2
阅读更多...
python使用fastapi实现多语言国际化的操作指南

python使用fastapi实现多语言国际化的操作指南

《python使用fastapi实现多语言国际化的操作指南》本文介绍了使用Python和FastAPI实现多语言国际化的操作指南,包括多语言架构技术栈、翻译管理、前端本地化、语言切换机制以及常见陷阱和... 目录多语言国际化实现指南项目多语言架构技术栈目录结构翻译工作流1. 翻译数据存储2. 翻译生成脚本
阅读更多...
Springboot中分析SQL性能的两种方式详解

Springboot中分析SQL性能的两种方式详解

《Springboot中分析SQL性能的两种方式详解》文章介绍了SQL性能分析的两种方式：MyBatis-Plus性能分析插件和p6spy框架,MyBatis-Plus插件配置简单,适用于开发和测试环... 目录SQL性能分析的两种方式:功能介绍实现方式:实现步骤:SQL性能分析的两种方式:功能介绍记录
阅读更多...
如何通过Python实现一个消息队列

如何通过Python实现一个消息队列

《如何通过Python实现一个消息队列》这篇文章主要为大家详细介绍了如何通过Python实现一个简单的消息队列,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录如何通过 python 实现消息队列如何把 http 请求放在队列中执行1. 使用 queue.Queue 和 reque
阅读更多...
Python如何实现PDF隐私信息检测

Python如何实现PDF隐私信息检测

《Python如何实现PDF隐私信息检测》随着越来越多的个人信息以电子形式存储和传输,确保这些信息的安全至关重要,本文将介绍如何使用Python检测PDF文件中的隐私信息,需要的可以参考下... 目录项目背景技术栈代码解析功能说明运行结php果在当今，数据隐私保护变得尤为重要。随着越来越多的个人信息以电子形
阅读更多...
使用 sql-research-assistant进行 SQL 数据库研究的实战指南(代码实现演示)

使用 sql-research-assistant进行 SQL 数据库研究的实战指南(代码实现演示)

《使用sql-research-assistant进行SQL数据库研究的实战指南(代码实现演示)》本文介绍了sql-research-assistant工具,该工具基于LangChain框架,集... 目录技术背景介绍核心原理解析代码实现演示安装和配置项目集成LangSmith 配置（可选）启动服务应用场景
阅读更多...
使用Python快速实现链接转word文档

使用Python快速实现链接转word文档

《使用Python快速实现链接转word文档》这篇文章主要为大家详细介绍了如何使用Python快速实现链接转word文档功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 演示代码展示from newspaper import Articlefrom docx import
阅读更多...
oracle DBMS_SQL.PARSE的使用方法和示例

oracle DBMS_SQL.PARSE的使用方法和示例

《oracleDBMS_SQL.PARSE的使用方法和示例》DBMS_SQL是Oracle数据库中的一个强大包,用于动态构建和执行SQL语句,DBMS_SQL.PARSE过程解析SQL语句或PL/S... 目录语法示例注意事项DBMS_SQL 是 oracle 数据库中的一个强大包，它允许动态地构建和执行
阅读更多...
前端原生js实现拖拽排课效果实例

前端原生js实现拖拽排课效果实例

《前端原生js实现拖拽排课效果实例》：本文主要介绍如何实现一个简单的课程表拖拽功能,通过HTML、CSS和JavaScript的配合,我们实现了课程项的拖拽、放置和显示功能,文中通过实例代码介绍的... 目录1. 效果展示2. 效果分析2.1 关键点2.2 实现方法3. 代码实现3.1 html部分3.2
阅读更多...
SQL 中多表查询的常见连接方式详解

SQL 中多表查询的常见连接方式详解

《SQL中多表查询的常见连接方式详解》本文介绍SQL中多表查询的常见连接方式,包括内连接（INNERJOIN）、左连接（LEFTJOIN）、右连接（RIGHTJOIN）、全外连接（FULLOUTER... 目录一、连接类型图表（ASCII 形式）二、前置代码（创建示例表）三、连接方式代码示例1. 内连接（I
阅读更多...

Copyright China编程 23002807@qq.com

沪ICP备2023033072号-2