mariaDB通过物理文件进行数据恢复

1. 起因

时间:2022.03.12 10:10

事件:网站的 mariadb 数据库 server 突然崩溃,尝试各种办法启动无果

过程:不幸的是数据库没有备份,万幸的是可以通过数据库物理文件恢复数据

结果:恢复数据,并特此记录整个过程,以备急时之需

2. 数据库与数据文件

众所周知,数据库中的数据会以文件的形式落盘进行保存(这些文件是以某种特定格式存储的,不是text格式,试图用文本编辑器打开会看到乱码)。在数据库中,每一个 database 都是一个单独的文件夹,文件夹下存储着每一张表的相关文件(不同的存储引擎生成的表文件可能不同,这里使用 innodb 引擎)。

例如,笔者网站数据库名称叫做 ivansli,有一个用户表 - user,脱敏之后的数据文件布局大致如下:

➜ /usr/local/data tree -L 2

.

├── aria_log.00000001

├── aria_log_control

├── ib_buffer_pool

├── ibdata1

├── ib_logfile0

├── ibtmp1

├── iZuf63yp8w5ku4znrskda8Z.err

├── iZuf63yp8w5ku4znrskda8Z.pid

├── multi-master.info

├── mysql-bin.000001

├── mysql-bin.000002

├── mysql-bin.000003

├── mysql-bin.index

├── mysql-slow.log

├── performance_schema

│ └── db.opt

└── ivansli

├── db.opt

├── user.frm

├── user.MYD

└── user.MYI这里的 /usr/local/data 数据库存储数据的目录

ivansli文件夹下可以看到有三个不同格式,相同名称的文件,作用分别为:user.frm,存储数据表的元数据 user.MYD,存储数据表的具体数据 user.MYI,存储数据表的索引

除了每张表的若干个文件之外,对于数据库server来说还有一个重要的 ibdata1 文件(位于数据库 server 存储数据的根目录)。

3. ibdata 作用

ibdata (是InnoDB基础结构的系统表空间) 包含几个对InnoDB至关重要的信息:

表格数据页表索引页数据字典MVCC控制数据撤消空间、回滚段

双重写入缓冲区(在后台写页面以避免操作系统缓存)插入缓冲区(对二级索引的更改)笔者这里 innodb_file_per_table=0,使用共享表空间 ibdata1,所以恢复数据时需要拷贝这个文件 关于这个文件具体可以查阅相关资料

对于笔者来说,虽然 数据库 server 挂了,但是这些关键性的文件还是完整的。那么,就有办法通过这些文件来恢复对应的数据。

举个不太恰当的例子:

这里的数据恢复有点像器官移植,器官捐献者可能已经大脑死亡。

但是捐献者的心脏等器官还是有活力的,找到适合的目标受体,这些器官还是能够继续工作的。

4. 恢复过程

这里以 ivansli database 数据库的恢复为例,整个恢复过程大致如下:

1.查看当前待恢复的数据所在的 server(这里称为 源数据库server) 类型以及版本 笔者这里使用的是 mariadb - 10.7.0

为什么要看已经 crash 掉的数据库 server 的类型、版本呢?

主要是为数据恢复找到一个匹配的环境(类比器官移植,也是需要找到相同、相近的匹配受体,否则就会出问题)

2.在其他服务器搭建 与 源数据库server 相同或者相近版本的 数据库server (这里称为 目标数据库server) 搭建好之后,先把 目标数据库server 停掉,暂时不启动,为后面拷贝数据做准备。

3.把 源数据库server 待恢复的文件夹(这里是 ivansli 文件夹)与 ibdata1 文件拷贝到 目标数据库server 数据目录下 ivansli 文件夹在 目标数据库server 数据库存储数据目录下不存在,直接拷贝。ibdata1 文件在 目标数据库server 数据库存储数据目录下有同名文件,直接覆盖。

4.修改 目标数据库server 数据库存储数据目录下相关文件权限

chmod -R 660 ivansli ibdata1

chown -R mysql:mysql ivansli ibdata1

chmod +x ivansli5.启动 目标数据库server

6.使用 root 账号登录 目标数据库server,查看数据恢复情况

7.目标数据库server上 能够看到待恢复数据,做数据备份导出保存

8.在 源数据库server 服务器上搭建新的 数据库server,把恢复的数据导入进来

5. 总结

对于开发人员来说,会经常听到删库跑路、删库坐牢之类的事情发生。对于公司来说,最重要的是用户的数据信息,尤其是金融等行业,宁可服务不可用,数据安全是一定要保证的。

这篇文章所描述的是在 数据文件 存在的特定情况下进行简单的数据恢复。对于数据文件被删除掉的情况,可能要进行扫描磁盘等更专业的操作了。

总之一句话:善待每一行代码,谨慎敲打每一个命令。还有就是:做好数据备份、做好数据备份、做好数据备份。

编程技术之道网站 https://blog.ivansli.com

一些扩展阅读 https://blog.jcole.us/innodb InnoDB

原文地址:https://www.toutiao.com/article/7074514018853175843/

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


学习编程是顺着互联网的发展潮流,是一件好事。新手如何学习编程?其实不难,不过在学习编程之前你得先了解你的目的是什么?这个很重要,因为目的决定你的发展方向、决定你的发展速度。
IT行业是什么工作做什么?IT行业的工作有:产品策划类、页面设计类、前端与移动、开发与测试、营销推广类、数据运营类、运营维护类、游戏相关类等,根据不同的分类下面有细分了不同的岗位。
女生学Java好就业吗?女生适合学Java编程吗?目前有不少女生学习Java开发,但要结合自身的情况,先了解自己适不适合去学习Java,不要盲目的选择不适合自己的Java培训班进行学习。只要肯下功夫钻研,多看、多想、多练
Can’t connect to local MySQL server through socket \'/var/lib/mysql/mysql.sock问题 1.进入mysql路径
oracle基本命令 一、登录操作 1.管理员登录 # 管理员登录 sqlplus / as sysdba 2.普通用户登录
一、背景 因为项目中需要通北京网络,所以需要连vpn,但是服务器有时候会断掉,所以写个shell脚本每五分钟去判断是否连接,于是就有下面的shell脚本。
BETWEEN 操作符选取介于两个值之间的数据范围内的值。这些值可以是数值、文本或者日期。
假如你已经使用过苹果开发者中心上架app,你肯定知道在苹果开发者中心的web界面,无法直接提交ipa文件,而是需要使用第三方工具,将ipa文件上传到构建版本,开...
下面的 SQL 语句指定了两个别名,一个是 name 列的别名,一个是 country 列的别名。**提示:**如果列名称包含空格,要求使用双引号或方括号:
在使用H5混合开发的app打包后,需要将ipa文件上传到appstore进行发布,就需要去苹果开发者中心进行发布。​
+----+--------------+---------------------------+-------+---------+
数组的声明并不是声明一个个单独的变量,比如 number0、number1、...、number99,而是声明一个数组变量,比如 numbers,然后使用 nu...
第一步:到appuploader官网下载辅助工具和iCloud驱动,使用前面创建的AppID登录。
如需删除表中的列,请使用下面的语法(请注意,某些数据库系统不允许这种在数据库表中删除列的方式):
前不久在制作win11pe,制作了一版,1.26GB,太大了,不满意,想再裁剪下,发现这次dism mount正常,commit或discard巨慢,以前都很快...
赛门铁克各个版本概览:https://knowledge.broadcom.com/external/article?legacyId=tech163829
实测Python 3.6.6用pip 21.3.1,再高就报错了,Python 3.10.7用pip 22.3.1是可以的
Broadcom Corporation (博通公司,股票代号AVGO)是全球领先的有线和无线通信半导体公司。其产品实现向家庭、 办公室和移动环境以及在这些环境...
发现个问题,server2016上安装了c4d这些版本,低版本的正常显示窗格,但红色圈出的高版本c4d打开后不显示窗格,
TAT:https://cloud.tencent.com/document/product/1340