MySQL 利用frm文件和ibd文件恢復(fù)表數(shù)據(jù)
frm文件和ibd文件簡(jiǎn)介
在MySQL中,如果我們使用了默認(rèn)的存儲(chǔ)引擎innodb創(chuàng)建一張表,那么在文件夾下面就會(huì)出現(xiàn)表名.frm和表名.ibd兩個(gè)文件,如果我們使用的是Myisam存儲(chǔ)引擎,那么就會(huì)出現(xiàn)三個(gè)文件,這里我們給出例子:
[root@ /data/yeyz]#ll total 580 -rw-rw---- 1 mysql mysql 8586 Apr 3 17:44 a.frm -rw-rw---- 1 mysql mysql 0 Apr 3 17:44 a.MYD -rw-rw---- 1 mysql mysql 1024 Apr 3 17:44 a.MYI -rw-rw---- 1 mysql mysql 8586 Apr 3 17:44 b.frm -rw-rw---- 1 mysql mysql 98304 Apr 3 17:45 b.ibd -rw-rw---- 1 mysql mysql 61 Nov 23 09:54 db.opt -rw-rw---- 1 mysql mysql 8556 Apr 29 21:37 tbl_test_2.frm -rw-rw---- 1 mysql mysql 98304 Apr 29 21:37 tbl_test_2.ibd -rw-rw---- 1 mysql mysql 8556 Apr 29 21:33 tbl_test.frm -rw-rw---- 1 mysql mysql 98304 Apr 29 21:33 tbl_test.ibd -rw-rw---- 1 mysql mysql 8614 Apr 29 21:40 test.frm -rw-rw---- 1 mysql mysql 98304 Apr 29 21:43 test.ibd -rw-rw---- 1 mysql mysql 8666 Apr 2 15:13 unstandard_ins.frm -rw-rw---- 1 mysql mysql 98304 Apr 3 11:46 unstandard_ins.ibd -rw-rw---- 1 mysql mysql 8586 Apr 3 17:44 yeyz.frm -rw-rw---- 1 mysql mysql 28 Apr 3 17:44 yeyz.MYD -rw-rw---- 1 mysql mysql 2048 Apr 3 17:44 yeyz.MYI
其中ibd文件是innodb的表數(shù)據(jù)文件,而frm文件是innodb的表結(jié)構(gòu)文件,mysiam存儲(chǔ)引擎的表中,frm是表結(jié)構(gòu),MYI文件是索引文件,而MYD文件是數(shù)據(jù)文件,從這里也可以看出,innodb存儲(chǔ)引擎的索引和數(shù)據(jù)是在一起的,而Myisam存儲(chǔ)引擎索引和數(shù)據(jù)是分開的。
需要注意的是,這個(gè)frm文件和ibd文件都是不能直接打開的。
考慮這樣一種需求,數(shù)據(jù)庫(kù)需要快速恢復(fù)一個(gè)表中的數(shù)據(jù),而這個(gè)表所在的庫(kù)的數(shù)據(jù)量非常大,恢復(fù)起來(lái)可能耗費(fèi)的時(shí)間也比較長(zhǎng),那么全庫(kù)恢復(fù)肯定不是最佳的選擇。那這種情況下怎么辦呢?我們可以使用frm文件盒ibd文件來(lái)對(duì)數(shù)據(jù)進(jìn)行恢復(fù)。下面我們分析分析這個(gè)過(guò)程。
frm文件恢復(fù)表結(jié)構(gòu)
當(dāng)然,表結(jié)構(gòu)需要使用frm文件來(lái)恢復(fù)。我們第一反應(yīng)想到的是,可以把這兩個(gè)文件直接拷貝到一個(gè)新的數(shù)據(jù)庫(kù)實(shí)例中,然后直接啟動(dòng)實(shí)例,這樣可以么?當(dāng)然是不行的。侄兒要是能行,估計(jì)DBA都可以下崗了。哈哈,廢話不多說(shuō),來(lái)看操作過(guò)程。
首先,我們創(chuàng)建一個(gè)新的實(shí)例專門用來(lái)恢復(fù)數(shù)據(jù),如果你使用線上的某一臺(tái)機(jī)器來(lái)執(zhí)行恢復(fù),那你必須承擔(dān)數(shù)據(jù)庫(kù)重啟的風(fēng)險(xiǎn)以及DML阻塞的風(fēng)險(xiǎn),所以最好的方法還是使用一臺(tái)專門的實(shí)例來(lái)進(jìn)行恢復(fù)。那么我們?nèi)绾螐膄rm文件中拿到我們想要的表結(jié)構(gòu)呢?
我拿線上的一個(gè)記錄慢日志的表舉個(gè)例子,為了寫著方便,表名稱我寫成了"aaa",這個(gè)表的結(jié)構(gòu)是這樣的:
mysql--root@localhost:test_recover 12:08:43>>show create table aaa\G *************************** 1. row *************************** Table: aaa Create Table: CREATE TABLE `aaa` ( `maintain_id` int(11) unsigned NOT NULL AUTO_INCREMENT COMMENT '自增列', `slowquery_filename` varchar(50) DEFAULT NULL COMMENT '慢日志文件名', `slowquery_path` varchar(150) DEFAULT NULL COMMENT '慢日志全路徑', `slowquery_process` tinyint(20) unsigned NOT NULL DEFAULT '0' COMMENT '慢日志是否被解析', `slowquery_uploadtime` datetime DEFAULT CURRENT_TIMESTAMP, `slowquery_analyzetime` date DEFAULT NULL COMMENT '慢日志解析時(shí)間', `slowquery_starttime` date DEFAULT NULL, `slowquery_endtime` date DEFAULT NULL, `instance_ip` varchar(15) DEFAULT NULL COMMENT '慢日志IP地址', `instance_port` int(11) DEFAULT NULL COMMENT '慢日志端口號(hào)地址', PRIMARY KEY (`maintain_id`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 1 row in set, 1 warning (0.01 sec)
要從frm文件中得到這樣的一個(gè)表,我們要做的步驟如下:
1、在實(shí)例上創(chuàng)建一個(gè)同名的表aaa,由于我們不知道這個(gè)表的結(jié)構(gòu),我們可以給它設(shè)定只有一個(gè)字段id,也就是
create table aaa (id int);
我們知道,這個(gè)時(shí)候會(huì)在對(duì)應(yīng)的data目錄下生成新的aaa.frm和aaa.ibd文件,然后我們使用我們備份的aaa.frm來(lái)替代之前的aaa.frm,然后重啟數(shù)據(jù)庫(kù)。
是的,你沒(méi)有看錯(cuò),我們使用備份的表結(jié)構(gòu)文件來(lái)替代它生成的表結(jié)構(gòu)文件。
2.看看重啟之后錯(cuò)誤日志輸出的結(jié)果吧,如下:
2019-03-22T03:17:28.652390Z 16 [Warning] InnoDB: Table test_recover/store_goods_price contains 1 user defined columns in InnoDB, but 12 columns in MySQL. Please check INFORMATION_SCHEMA.INNODB_SYS_COLUMNS and http://dev.mysql.com/doc/refman/5.7/en/innodb-troubleshooting.html for how to resolve the issue. 2019-04-02T07:56:31.558461Z 41 [Warning] InnoDB: Table test_recover/dv_control contains 1 user defined columns in InnoDB, but 14 columns in MySQL. Please check INFORMATION_SCHEMA.INNODB_SYS_COLUMNS and http://dev.mysql.com/doc/refman/5.7/en/innodb-troubleshooting.html for how to resolve the issue. 2019-05-23T03:14:10.161122Z 92 [Warning] InnoDB: Table test_recover/aaa contains 1 user defined columns in InnoDB, but 10 columns in MySQL. Please check INFORMATION_SCHEMA.INNODB_SYS_COLUMNS and http://dev.mysql.com/doc/refman/5.7/en/innodb-troubleshooting.html for how to resolve the issue.
可以看到,10-12行的錯(cuò)誤日志里面提示我們這個(gè)表aaa只包含1個(gè)字段,但是frm中包含10個(gè)字段,字段的數(shù)量不符。
這和我們預(yù)料的結(jié)果符合,因?yàn)槲覀冊(cè)趧?chuàng)建表aaa的時(shí)候,只給了他1個(gè)字段id,而我們要恢復(fù)的aaa表有10個(gè)字段,肯定是無(wú)法從frm中讀取的。此時(shí)你可能很容易就能想到,如果我們把這個(gè)aaa表的字段調(diào)成10個(gè),那么最終的結(jié)果是什么呢?
3.將aaa表的字段數(shù)量升級(jí)成10個(gè),然后重新拷貝frm文件,修改配置文件中的參數(shù)innodb_force_recovery=6,我們看看最終的結(jié)果:
mysql--root:(none) 12:04:20>>use test_recover; Database changed mysql--root:test_recover 12:04:25>>create table aaa (id1 int,id2 int,id3 int,id4 int,id5 int,id6 int,id7 int,id8 int,id9 int,id10 int); Query OK, 0 rows affected (0.03 sec) mysql--root@localhost:test_recover 12:05:08>>show create table aaa\G *************************** 1. row *************************** Table: aaa Create Table: CREATE TABLE `aaa` ( `id1` int(11) DEFAULT NULL, `id2` int(11) DEFAULT NULL, `id3` int(11) DEFAULT NULL, `id4` int(11) DEFAULT NULL, `id5` int(11) DEFAULT NULL, `id6` int(11) DEFAULT NULL, `id7` int(11) DEFAULT NULL, `id8` int(11) DEFAULT NULL, `id9` int(11) DEFAULT NULL, `id10` int(11) DEFAULT NULL ) ENGINE=InnoDB DEFAULT CHARSET=utf8 1 row in set (0.00 sec)
然后我們重啟實(shí)例,再次查看表aaa,可以看到結(jié)果如下:
mysql--root:test_recover 12:08:43>>show create table aaa\G *************************** 1. row *************************** Table: aaa Create Table: CREATE TABLE `aaa` ( `maintain_id` int(11) unsigned NOT NULL AUTO_INCREMENT COMMENT '自增列', `slowquery_filename` varchar(50) DEFAULT NULL COMMENT '慢日志文件名', `slowquery_path` varchar(150) DEFAULT NULL COMMENT '慢日志全路徑', `slowquery_process` tinyint(20) unsigned NOT NULL DEFAULT '0' COMMENT '慢日志是否被解析', `slowquery_uploadtime` datetime DEFAULT CURRENT_TIMESTAMP, `slowquery_analyzetime` date DEFAULT NULL COMMENT '慢日志解析時(shí)間', `slowquery_starttime` date DEFAULT NULL, `slowquery_endtime` date DEFAULT NULL, `instance_ip` varchar(15) DEFAULT NULL COMMENT '慢日志IP地址', `instance_port` int(11) DEFAULT NULL COMMENT '慢日志端口號(hào)地址', PRIMARY KEY (`maintain_id`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 1 row in set, 1 warning (0.01 sec)
可以看到,我們想要的表結(jié)構(gòu)已經(jīng)從frm文件中恢復(fù)出來(lái)了,需要注意的是,這個(gè)過(guò)程中我們并沒(méi)有使用ibd文件。
總結(jié)一下利用frm文件恢復(fù)表結(jié)構(gòu)的步驟:
1、首先創(chuàng)建一個(gè)同名的表,然后啟動(dòng)實(shí)例
2、使用備份的frm文件替代生成的frm文件,重啟實(shí)例
3、查看錯(cuò)誤日志,從錯(cuò)誤日志中獲取到備份的frm文件中的字段數(shù)量m
4、重新創(chuàng)建同名表,保證字段數(shù)量為m,與備份表保持一致,然后重新拷貝備份的frm文件到對(duì)應(yīng)目錄
5、修改實(shí)例的配置文件中的參數(shù)innodb_force_recovery=6,然后重啟數(shù)據(jù)庫(kù),就可以看到對(duì)應(yīng)的表結(jié)構(gòu)創(chuàng)建語(yǔ)句,我們把它保存下來(lái),下一步恢復(fù)數(shù)據(jù)的時(shí)候要用。這一步相當(dāng)重要
6、將參數(shù)innodb_force_recovery=6注釋掉,重新使用默認(rèn)的值,然后重啟數(shù)據(jù)庫(kù),準(zhǔn)備恢復(fù)表數(shù)據(jù)。
至此,表結(jié)構(gòu)恢復(fù)完畢。
解釋一下innodb_force_recovery參數(shù),這個(gè)參數(shù)的最大值是6,在該等級(jí)下,僅支持一部分查詢功能,DML都不支持,從名稱就可以看出來(lái),這是在一些強(qiáng)行恢復(fù)的場(chǎng)景下才會(huì)使用的參數(shù),一般情況下這個(gè)參數(shù)可以不要,使用默認(rèn)值就行。有興趣更深了解的同學(xué)可以參考官方文檔。
ibd文件恢復(fù)表數(shù)據(jù)
上一步執(zhí)行完成之后,我們已經(jīng)獲取了對(duì)應(yīng)的表結(jié)構(gòu),現(xiàn)在我們看看如何恢復(fù)表數(shù)據(jù)。
恢復(fù)表數(shù)據(jù)的方法比較簡(jiǎn)單,大體步驟如下:
1、利用我們上一步中獲取的建表語(yǔ)句,重新創(chuàng)建一張表,然后執(zhí)行:
flush table aaa for export;
這個(gè)語(yǔ)法是將表里面的數(shù)據(jù)落盤,并獲取該表的鎖,為后面恢復(fù)做好準(zhǔn)備。
2、然后我們使用如下語(yǔ)句:
alter table aaa discard tablespace;
這個(gè)語(yǔ)句會(huì)刪除當(dāng)前的ibd文件。
3、然后我們使用我們之前備份的ibd文件,將其拷貝到對(duì)應(yīng)的實(shí)例目錄下面
4、最后在將ibd文件重新加載進(jìn)來(lái),使用如下語(yǔ)句:
alter table aaa import tablespace;
重啟數(shù)據(jù)庫(kù),這樣,我們的數(shù)據(jù)就恢復(fù)成功了。
簡(jiǎn)單總結(jié)一下
整個(gè)恢復(fù)的流程算是介紹完了,其中比較巧妙的地方就是從frm文件中獲取表結(jié)構(gòu)信息,我們使用了兩次拼湊表創(chuàng)建語(yǔ)句的方法,最終得到了待恢復(fù)的表的表結(jié)構(gòu),然后使用alter table discard tablespace和alter table import tablespace的方法來(lái)恢復(fù)表中的數(shù)據(jù)。整個(gè)過(guò)程看著比較復(fù)雜,其實(shí)完全可以按照步驟抽象出來(lái)一個(gè)腳本,這樣在下次恢復(fù)的時(shí)候,只需要輸入要恢復(fù)的表的名稱,就可以快速的恢復(fù)表結(jié)構(gòu)和數(shù)據(jù),不失為一種應(yīng)急的數(shù)據(jù)恢復(fù)預(yù)案。
以上就是MySQL 利用frm文件和ibd文件恢復(fù)表數(shù)據(jù)的詳細(xì)內(nèi)容,更多關(guān)于MySQL 恢復(fù)表數(shù)據(jù)的資料請(qǐng)關(guān)注本站其它相關(guān)文章!
版權(quán)聲明:本站文章來(lái)源標(biāo)注為YINGSOO的內(nèi)容版權(quán)均為本站所有,歡迎引用、轉(zhuǎn)載,請(qǐng)保持原文完整并注明來(lái)源及原文鏈接。禁止復(fù)制或仿造本網(wǎng)站,禁止在非www.sddonglingsh.com所屬的服務(wù)器上建立鏡像,否則將依法追究法律責(zé)任。本站部分內(nèi)容來(lái)源于網(wǎng)友推薦、互聯(lián)網(wǎng)收集整理而來(lái),僅供學(xué)習(xí)參考,不代表本站立場(chǎng),如有內(nèi)容涉嫌侵權(quán),請(qǐng)聯(lián)系alex-e#qq.com處理。