MySQL InnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据

本文主要是介绍MySQL InnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

《MySQLInnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据》mysql的ibdata文件被误删、被恶意修改,没有从库和备份数据的情况下的数据恢复,不能保证数据库所有表数据...

参考:mysql Innodb表空间卸载、迁移、装载的使用方法

注意!此方法只适用于innodb_file_per_table独立表空间的InnoDB实例。

此种方法可以恢复ibdata文件被误删、被恶意修改,没有从库和备份数据的情况下的数据恢复,不能保证数据库所有表数据的100%恢复,目的是尽可能多的恢复。

恢复数据前提是表结构定义文件frm可以使用,如果有下面报错就比较麻烦,需要手动恢复frm文件。

我的链接:https://wwwwww.chinasem.cn.cnblogs.com/jiangxu67/p/4755097.html

150821 16:31:27 [ERROR] /usr/local/mysql51/libexec/mysqld: Incorrect information in file: './t/test1.frm'

InnoDB引擎ibdata和ibd文件结构

结构图:https://github.com/jeremycole/innodb_diagrams

MySQL InnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据MySQL InnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据

恢复原理:

因为配置innodb_file_per_table的独立表空间后,InnoDB引擎表数据、索引保存在ibd文件,ibdata文件只负责undo、double write、insert buffer...一些环节。

当然如果MySQL是异常关闭同时ibdata损坏的情况下会丢失一部分数据,但如果数据库是单点,那尽量能恢复多少是多少,至少比数据全部丢失好很多。

ibdata文件中有一个数据字典data dictionary,记录的是实例中每个表在ibdata中的一个逻辑位置,而在ibd文件中也存储着同样的一个tablespace id,两者必须一致InnoDB引擎才能正常加载到数据,否则会报错:

2015-08-18 10:30:30 12571 [ERROR] InnoDB: Error: tablespace id in file &lsqChina编程uo;.\test\test1.ibd’ is 112, but in the InnoDB InnoDB: data dictionary it is 1

实际上我们对于ibdata文件中的 undo、double write、insert buffer数据可以并不担心,我们只需要利用一个空的实例,一个干净的ibdata文件,通过卸载和加载表空间把ibd文件与ibdata文件关联。

恢复步骤:

准备一台新实例

1、建表,在新实例中建需要恢复表的表名临时表。

这块建议一次性将表都建好,可以统一检查frm文件是否有损坏,注意字符集。

#循环建表[root@test1 db1]$ for i in `ls | grep ".ibd" | awk -F '.' '{print $1}'`;do mysql -uroot -p -S /tmp/mysql.sock -e "use test;create table ${i} (a int)engine=innodb default charset=utf8"; done

2、停止实例,添加配置innodb_force_recovery = 6

3、替换frm文件

#备份新表frm[root@test1 test]$ cp ./*.frm ./bak[root@test1 test]$ ls ./bak#删除新表frm,将需要恢复表的frm复制到test目录[root@test1 test]$ rm -rf ./*.frm[root@test1 db1]$ for i in `ls | grep ".frm" | awk -F '.' '{print $1}'`;do cp $i.frm ../db1/;done

4、启动实例,检查表

#循环检查表是否能够打开[root@test1 db1]$ for i in `ls | grep ".ibd" | awk -F '.' '{print $1}'`;do mysql -uroot -p -S javascript/tmp/mysql.sock -e "use test;show create table $i \G" --default-character-set=utf8 >> ./build1.txt 2>&1 ;done

如果在输出文件中出现以下错误则需要修复frm文件,没有错误可以继续。修复frm见帖子开始的链接。

150821 16:31:27 [ERROR] /usr/local/mysql51/libexec/mysqld: Incorrect information in file: './t/test1.frm'

5、获取ibd文件中的tablespace id

ibd文件需要hexdump打开,ibd文件的0x24,0x25位置记录的是该表的tablespace id,我们可以通过脚本一次性获取所有表的id。

[root@test1 db1]$ for i in `ls | grep ".ibd" | awk -F '.' '{print $1}'`;do a=`hexdump -C $i.ibd |head -n 3 |tail -n 1|awk '{print $6$7}'`;mysql -uroot -p -S /tmp/mysql.sock -e "select conv('$a',16,10)" | grep -v conv >> ./id.txt 2>&1;done

然后按照id从小到大排序,因为后面需要按照id从小到大恢复,不用反复重做新实例。

6、去掉innodb_force_recovery = 6配置,重启生效

7、建表生成tablespace id

这里注意,如果ibd文件中的tablespace id是5001,那么就需要建5000个临时表。

另外注意建表后系统的openfile可能会很大,需要先修改系统的参数,或者建和删表可以一起做。

[root@test1 db1]$ for i in {1..5000};do mysql -uroot -p -S /tmp/mysql.sock -e "use tmp_table;create table table_${i} (a int)engine=innodb default charset=utf8"; done

8、建需要恢复的表结构

9、卸载表空间

alter table table_name discard tablespace;

10、替换ibd文件

11、加载表空间

alter table table_name import tablespace;

官方对于卸载表和加载表的说明:

ALTER TABLE tbl_name DISCARD TABLESPACE;This deletes the current .ibd file, so be sure that you have a backup first. Attempting to modify the table contents while the tablespace file is discarded results in an error. You can perform the DDL operations listed in Section 14.10, “InnoDB and Online DDL” while the tablespace file is discarded.To import the backup .ibd file back into the table, copy it into the database directory, and then issue this statement:ALTER TABLE tbl_name IMPORT TABLESPACE;The tablespace file need not necessarily have been created on the server into which it is imported later. In MySQL 5.6, importing a tablespace file from another server works if the both servers have GA (General Availablility) status and their versions are within the same series. Otherwise, the file must have been created on the server into which it is importephpd.

按照以上步骤就可以把数据读取出来,然后使用mysqldump导出。

如果字符集不一致或者字段类型不一致可能读取出来的数会出现数据错误、乱码或者串列。

MySQL 5.6对于表结构要求很严格,如果编程China编程字段类型与原表不一致会报错。

这篇关于MySQL InnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1153616

相关文章

Linux下如何使用C++获取硬件信息

《Linux下如何使用C++获取硬件信息》这篇文章主要为大家详细介绍了如何使用C++实现获取CPU,主板,磁盘,BIOS信息等硬件信息,文中的示例代码讲解详细,感兴趣的小伙伴可以了解下... 目录方法获取CPU信息:读取"/proc/cpuinfo"文件获取磁盘信息:读取"/proc/diskstats"文

Java使用SLF4J记录不同级别日志的示例详解

《Java使用SLF4J记录不同级别日志的示例详解》SLF4J是一个简单的日志门面,它允许在运行时选择不同的日志实现,这篇文章主要为大家详细介绍了如何使用SLF4J记录不同级别日志,感兴趣的可以了解下... 目录一、SLF4J简介二、添加依赖三、配置Logback四、记录不同级别的日志五、总结一、SLF4J

使用Python实现一个优雅的异步定时器

《使用Python实现一个优雅的异步定时器》在Python中实现定时器功能是一个常见需求,尤其是在需要周期性执行任务的场景下,本文给大家介绍了基于asyncio和threading模块,可扩展的异步定... 目录需求背景代码1. 单例事件循环的实现2. 事件循环的运行与关闭3. 定时器核心逻辑4. 启动与停

如何使用Nginx配置将80端口重定向到443端口

《如何使用Nginx配置将80端口重定向到443端口》这篇文章主要为大家详细介绍了如何将Nginx配置为将HTTP(80端口)请求重定向到HTTPS(443端口),文中的示例代码讲解详细,有需要的小伙... 目录1. 创建或编辑Nginx配置文件2. 配置HTTP重定向到HTTPS3. 配置HTTPS服务器

Java使用ANTLR4对Lua脚本语法校验详解

《Java使用ANTLR4对Lua脚本语法校验详解》ANTLR是一个强大的解析器生成器,用于读取、处理、执行或翻译结构化文本或二进制文件,下面就跟随小编一起看看Java如何使用ANTLR4对Lua脚本... 目录什么是ANTLR?第一个例子ANTLR4 的工作流程Lua脚本语法校验准备一个Lua Gramm

Java Optional的使用技巧与最佳实践

《JavaOptional的使用技巧与最佳实践》在Java中,Optional是用于优雅处理null的容器类,其核心目标是显式提醒开发者处理空值场景,避免NullPointerExce... 目录一、Optional 的核心用途二、使用技巧与最佳实践三、常见误区与反模式四、替代方案与扩展五、总结在 Java

使用Java将DOCX文档解析为Markdown文档的代码实现

《使用Java将DOCX文档解析为Markdown文档的代码实现》在现代文档处理中,Markdown(MD)因其简洁的语法和良好的可读性,逐渐成为开发者、技术写作者和内容创作者的首选格式,然而,许多文... 目录引言1. 工具和库介绍2. 安装依赖库3. 使用Apache POI解析DOCX文档4. 将解析

Qt中QUndoView控件的具体使用

《Qt中QUndoView控件的具体使用》QUndoView是Qt框架中用于可视化显示QUndoStack内容的控件,本文主要介绍了Qt中QUndoView控件的具体使用,具有一定的参考价值,感兴趣的... 目录引言一、QUndoView 的用途二、工作原理三、 如何与 QUnDOStack 配合使用四、自

C++使用printf语句实现进制转换的示例代码

《C++使用printf语句实现进制转换的示例代码》在C语言中,printf函数可以直接实现部分进制转换功能,通过格式说明符(formatspecifier)快速输出不同进制的数值,下面给大家分享C+... 目录一、printf 原生支持的进制转换1. 十进制、八进制、十六进制转换2. 显示进制前缀3. 指

数据库面试必备之MySQL中的乐观锁与悲观锁

《数据库面试必备之MySQL中的乐观锁与悲观锁》:本文主要介绍数据库面试必备之MySQL中乐观锁与悲观锁的相关资料,乐观锁适用于读多写少的场景,通过版本号检查避免冲突,而悲观锁适用于写多读少且对数... 目录一、引言二、乐观锁(一)原理(二)应用场景(三)示例代码三、悲观锁(一)原理(二)应用场景(三)示例