XtraBackup 实现不停机不锁表搭建mysql主从

2024-02-14 10:58

本文主要是介绍XtraBackup 实现不停机不锁表搭建mysql主从,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

简介

Xtrabackup是由 Percona 开发的一个开源软件,可实现对 InnoDB 的数据备份,支持在线热备份(备份时不影响数据读写)。备份时,Xtrabackup 会将 Master 的 binlog 信息记录在 xtrabackup_slave_info 文件中,通过此信息可以方便的搭建主从复制。

XtraBackup 有两个工具:xtrabackup 和 innobackupex:

  • xtrabackup 本身只能备份 InnoDB 和 XtraDB ,不能备份 MyISAM;
  • innobackupex 本身是 Hot Backup 脚本修改而来,同时可以备份 MyISAM 和 InnoDB,但是备份 MyISAM 需要加读锁。

官网:http://www.percona.com/software/percona-xtrabackup
文档:http://www.percona.com/doc/percona-xtrabackup/2.2/index.html

注:本文服务器环境为 CentOS,其他环境请自行修改实现。

修改主库、从库 MySQL 配置文件

1、Master

vim /etc/my.cnf

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-setting">datadir=<span class="hljs-value">/var/lib/mysql</span></span>
<span class="hljs-setting">server-id=<span class="hljs-value"><span class="hljs-number" style="color: rgb(42, 161, 152);">1</span></span></span>
<span class="hljs-setting">log-bin=<span class="hljs-value">mysql-bin</span></span>
</code>

2、Slave:

vim /etc/my.cnf

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-setting">server-id=<span class="hljs-value"><span class="hljs-number" style="color: rgb(42, 161, 152);">2</span></span></span>
<span class="hljs-setting">datadir=<span class="hljs-value">/var/lib/mysql</span></span>
</code>

安装 XtraBackup

1、添加源

yum install http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm

检查是否添加成功:

yum list | grep percona

如果执行正确,其输出信息通常类似:

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;">percona-<span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">release</span>.x86_64                     <span class="hljs-number" style="color: rgb(42, 161, 152);">0.0</span>-<span class="hljs-number" style="color: rgb(42, 161, 152);">1</span>                       installed
...
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-client-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64            <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-devel-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64             <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">server</span>-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64            <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-shared-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64            <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
Percona-<span class="hljs-keyword" style="color: rgb(133, 153, 0);">Server</span>-test-<span class="hljs-number" style="color: rgb(42, 161, 152);">51.</span>x86_64              <span class="hljs-number" style="color: rgb(42, 161, 152);">5.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.47</span>-rel11<span class="hljs-number" style="color: rgb(42, 161, 152);">.1</span><span class="hljs-number" style="color: rgb(42, 161, 152);">.51</span>.rhel5     percona
...
xtrabackup.x86_64                          <span class="hljs-number" style="color: rgb(42, 161, 152);">1.2</span>-<span class="hljs-number" style="color: rgb(42, 161, 152);">22.</span>rhel5                percona
</span></code>

2、安装 xtrabackup

yum install percona-xtrabackup

创建备份

innobackupex --user=DBUSER --password=DBUSERPASS /path/to/BACKUP-DIR/

如果执行正确,其输出信息通常类似:

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;">innobackupex: <span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">Backup</span> created <span class="hljs-keyword" style="color: rgb(133, 153, 0);">in</span> directory <span class="hljs-string" style="color: rgb(42, 161, 152);">'/path/to/BACKUP-DIR/2015-03-03_00-00-09'</span>
innobackupex: MySQL <span class="hljs-keyword" style="color: rgb(133, 153, 0);">binlog</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">position</span>: filename <span class="hljs-string" style="color: rgb(42, 161, 152);">'mysql-bin.000003'</span>, <span class="hljs-keyword" style="color: rgb(133, 153, 0);">position</span> <span class="hljs-number" style="color: rgb(42, 161, 152);">1946</span>
<span class="hljs-number" style="color: rgb(42, 161, 152);">111225</span> <span class="hljs-number" style="color: rgb(42, 161, 152);">00</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">00</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">53</span>  innobackupex: completed OK!
</span></code>

备份时,innobackupex 会调用 xtrabackup 备份 InnoDB 表的数据,并且会复制 MyISAM, MERGE,CSV 和 ARCHIVE 表的表定义文件(.frm 文件)、数据文件。同时还会备份触发器和数据库配置信息相关的文件。这些文件将会保存在指定备份目录中一个以时间戳命名的目录下。

准备备份

一般情况下,在备份完成后,数据尚且不能用于恢复操作,因为备份的数据中可能会包含尚未提交的事务或已经提交但尚未同步至数据文件中的事务。因此,此时数据文件仍处理不一致状态。“准备”的主要作用正是通过回滚未提交的事务及同步已经提交的事务至数据文件也使得数据文件处于一致性状态。

innobackupex --apply-log /path/to/BACKUP-DIR

如果执行正确,其最后输出的几行信息通常如下:

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;">xtrabackup: starting <span class="hljs-keyword" style="color: rgb(133, 153, 0);">shutdown</span> with innodb_fast_shutdown = <span class="hljs-number" style="color: rgb(42, 161, 152);">1</span>
<span class="hljs-number" style="color: rgb(42, 161, 152);">120407</span>  <span class="hljs-number" style="color: rgb(42, 161, 152);">9</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">01</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">36</span>  InnoDB: Starting <span class="hljs-keyword" style="color: rgb(133, 153, 0);">shutdown</span>...
<span class="hljs-number" style="color: rgb(42, 161, 152);">120407</span>  <span class="hljs-number" style="color: rgb(42, 161, 152);">9</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">01</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">40</span>  InnoDB: Shutdown completed; <span class="hljs-keyword" style="color: rgb(133, 153, 0);">log</span> sequence number <span class="hljs-number" style="color: rgb(42, 161, 152);">92036620</span>
<span class="hljs-number" style="color: rgb(42, 161, 152);">120407</span> 09:<span class="hljs-number" style="color: rgb(42, 161, 152);">01</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">40</span>  innobackupex: completed OK!
</code>

在实现“准备”的过程中,innobackupex 通常还可以使用 --use-memory 选项来指定其可以使用的内存的大小,默认通常为 100M。如果有足够的内存可用,可以多划分一些内存给 prepare 的过程,以提高其完成速度。

恢复备份

将数据复制到从服务器上:
scp -r /path/to/BACKUP-DIR root@slave_host:/data/

在从服务器中恢复备份数据:
innobackupex --copy-back /path/to/BACKUP-DIR

如果服务器剩余空间不足,你可以使用 --move-back 替换掉 --copy-back

如果执行正确,其输出信息的最后几行通常如下:

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;">innobackupex: Starting to copy InnoDB <span class="hljs-built_in" style="color: rgb(38, 139, 210);">log</span> files
innobackupex: <span class="hljs-keyword" style="color: rgb(133, 153, 0);">in</span> <span class="hljs-string" style="color: rgb(42, 161, 152);">'/backup/2012-04-07_08-17-03'</span>
innobackupex: back to original InnoDB <span class="hljs-built_in" style="color: rgb(38, 139, 210);">log</span> directory <span class="hljs-string" style="color: rgb(42, 161, 152);">'/mydata/data'</span>
innobackupex: Finished copying back files.
...
<span class="hljs-number" style="color: rgb(42, 161, 152);">120407</span> <span class="hljs-number" style="color: rgb(42, 161, 152);">09</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">36</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">10</span>  innobackupex: completed OK!
</code>

启动从库 MySQL,设置主库信息

当数据恢复至数据目录以后,还需要确保所有数据文件的属主和属组均为正确的用户,如mysql,否则,在启动mysqld之前还需要事先修改数据文件的属主和属组。如:

chown -R mysql:mysql /mydata/data/

启动从库:

/etc/init.d/mysqld start

在主库中开设主从用的账号和权限:

GRANT REPLICATION SLAVE ON *.* TO 'slave'@'192.168.0.1' IDENTIFIED BY 'slave';

查看备份文件 xtrabackup_binlog_info 中的日志文件以及position。

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">CHANGE</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">MASTER</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">TO</span>
MASTER_HOST=<span class="hljs-string" style="color: rgb(42, 161, 152);">'<master_host>'</span>,
MASTER_USER=<span class="hljs-string" style="color: rgb(42, 161, 152);">'<slave_username>'</span>,
MASTER_PASSWORD=<span class="hljs-string" style="color: rgb(42, 161, 152);">'<slave_password>'</span>,
MASTER_LOG_FILE=<span class="hljs-string" style="color: rgb(42, 161, 152);">'<see xtrabackup_binlog_info>'</span>,
MASTER_LOG_POS=<see xtrabackup_binlog_info>;</span>
</code>

开启主从同步:

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">START</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">SLAVE</span>;</span>
</code>

查看从库状态:

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-operator"><span class="hljs-keyword" style="color: rgb(133, 153, 0);">SHOW</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">SLAVE</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">STATUS</span>;</span>
</code>

Ps:用 innobackupex 备份数据时,–apply-log 处理过的备份数据里有两个文件说明该备份数据对应的 binlog 的文件名和位置。但有时这俩文件说明的位置可能会不同。
1 对于纯 InnoDB 操作,备份出来的数据中上述两个文件的内容是一致的
2 对于 InnoDB 和非事务存储引擎混合操作,xtrabackup_binlog_info 中所示的 position 应该会比 xtrabackup_pos_innodb 所示的数值大。此时应以 xtrabackup_binlog_info 为准;而后者和 apply-log 时 InnoDB recovery log 中显示的内容是一致的,只针对 InnoDB 这部分数据。

Ps2:启动 MySQL 时,遇到权限问题的解决方法:

报错信息:

<code style="font-family: Consolas, Menlo, Monaco, 'Courier New', monospace; font-size: 1em; padding: 0px; color: inherit; white-space: inherit; background-color: transparent;"><span class="hljs-number" style="color: rgb(42, 161, 152);">150430</span> <span class="hljs-number" style="color: rgb(42, 161, 152);">14</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">41</span>:<span class="hljs-number" style="color: rgb(42, 161, 152);">16</span>  <span class="hljs-attribute" style="color: rgb(181, 137, 0);">InnoDB</span>: Operating system error number <span class="hljs-number" style="color: rgb(42, 161, 152);">13</span> <span class="hljs-keyword" style="color: rgb(133, 153, 0);">in</span> a file operation.
<span class="hljs-attribute" style="color: rgb(181, 137, 0);">InnoDB</span>: The error means mysqld does <span class="hljs-keyword" style="color: rgb(133, 153, 0);">not</span> have the access rights to
<span class="hljs-attribute" style="color: rgb(181, 137, 0);">InnoDB</span>: the directory.
</code>

解决方法:
chown -R mysql:mysql /home/data/mysql
chcon -R -t mysqld_db_t /home/mysql

这篇关于XtraBackup 实现不停机不锁表搭建mysql主从的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/708304

相关文章

MySQL 8 中的一个强大功能 JSON_TABLE示例详解

《MySQL8中的一个强大功能JSON_TABLE示例详解》JSON_TABLE是MySQL8中引入的一个强大功能,它允许用户将JSON数据转换为关系表格式,从而可以更方便地在SQL查询中处理J... 目录基本语法示例示例查询解释应用场景不适用场景1. ‌jsON 数据结构过于复杂或动态变化‌2. ‌性能要

Python实现终端清屏的几种方式详解

《Python实现终端清屏的几种方式详解》在使用Python进行终端交互式编程时,我们经常需要清空当前终端屏幕的内容,本文为大家整理了几种常见的实现方法,有需要的小伙伴可以参考下... 目录方法一:使用 `os` 模块调用系统命令方法二:使用 `subprocess` 模块执行命令方法三:打印多个换行符模拟

SpringBoot+EasyPOI轻松实现Excel和Word导出PDF

《SpringBoot+EasyPOI轻松实现Excel和Word导出PDF》在企业级开发中,将Excel和Word文档导出为PDF是常见需求,本文将结合​​EasyPOI和​​Aspose系列工具实... 目录一、环境准备与依赖配置1.1 方案选型1.2 依赖配置(商业库方案)二、Excel 导出 PDF

Python实现MQTT通信的示例代码

《Python实现MQTT通信的示例代码》本文主要介绍了Python实现MQTT通信的示例代码,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一... 目录1. 安装paho-mqtt库‌2. 搭建MQTT代理服务器(Broker)‌‌3. pytho

MySQL字符串常用函数详解

《MySQL字符串常用函数详解》本文给大家介绍MySQL字符串常用函数,本文结合实例代码给大家介绍的非常详细,对大家学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录mysql字符串常用函数一、获取二、大小写转换三、拼接四、截取五、比较、反转、替换六、去空白、填充MySQL字符串常用函数一、

MySQL中比较运算符的具体使用

《MySQL中比较运算符的具体使用》本文介绍了SQL中常用的符号类型和非符号类型运算符,符号类型运算符包括等于(=)、安全等于(=)、不等于(/!=)、大小比较(,=,,=)等,感兴趣的可以了解一下... 目录符号类型运算符1. 等于运算符=2. 安全等于运算符<=>3. 不等于运算符<>或!=4. 小于运

虚拟机Centos7安装MySQL数据库实践

《虚拟机Centos7安装MySQL数据库实践》用户分享在虚拟机安装MySQL的全过程及常见问题解决方案,包括处理GPG密钥、修改密码策略、配置远程访问权限及防火墙设置,最终通过关闭防火墙和停止Net... 目录安装mysql数据库下载wget命令下载MySQL安装包安装MySQL安装MySQL服务安装完成

使用zip4j实现Java中的ZIP文件加密压缩的操作方法

《使用zip4j实现Java中的ZIP文件加密压缩的操作方法》本文介绍如何通过Maven集成zip4j1.3.2库创建带密码保护的ZIP文件,涵盖依赖配置、代码示例及加密原理,确保数据安全性,感兴趣的... 目录1. zip4j库介绍和版本1.1 zip4j库概述1.2 zip4j的版本演变1.3 zip4

MySQL进行数据库审计的详细步骤和示例代码

《MySQL进行数据库审计的详细步骤和示例代码》数据库审计通过触发器、内置功能及第三方工具记录和监控数据库活动,确保安全、完整与合规,Java代码实现自动化日志记录,整合分析系统提升监控效率,本文给大... 目录一、数据库审计的基本概念二、使用触发器进行数据库审计1. 创建审计表2. 创建触发器三、Java

MySQL逻辑删除与唯一索引冲突解决方案

《MySQL逻辑删除与唯一索引冲突解决方案》本文探讨MySQL逻辑删除与唯一索引冲突问题,提出四种解决方案:复合索引+时间戳、修改唯一字段、历史表、业务层校验,推荐方案1和方案3,适用于不同场景,感兴... 目录问题背景问题复现解决方案解决方案1.复合唯一索引 + 时间戳删除字段解决方案2:删除后修改唯一字