Mysql關(guān)系型數(shù)據(jù)庫管理系統(tǒng)
mysql是一個(gè)開放源碼的小型關(guān)聯(lián)式數(shù)據(jù)庫管理系統(tǒng),開發(fā)者為瑞典mysql ab公司。mysql被廣泛地應(yīng)用在internet上的中小型網(wǎng)站中。由于其體積小、速度快、總體擁有成本低,尤其是開放源碼這一特點(diǎn),許多中小型網(wǎng)站為了降低網(wǎng)站總體擁有成本而選擇了mysql作為網(wǎng)站數(shù)據(jù)庫。
這篇文章主要介紹了MySQL誤操作后快速恢復(fù)數(shù)據(jù)的方法,需要的朋友可以參考下
摘要: 利用binlog閃回誤操作數(shù)據(jù)。
基本上每個(gè)跟數(shù)據(jù)庫打交道的程序員(當(dāng)然也可能是你同事)都會(huì)碰一個(gè)問題,MySQL誤操作后如何快速回滾?比如,delete一張表,忘加限制條件,整張表沒了。假如這還是線上環(huán)境核心業(yè)務(wù)數(shù)據(jù),那這事就鬧大了。誤操作后,能快速回滾數(shù)據(jù)是非常重要的。
傳統(tǒng)解法
用全量備份重搭實(shí)例,再利用增量binlog備份,恢復(fù)到誤操作之前的狀態(tài)。然后跳過誤操作的SQL,再繼續(xù)應(yīng)用binlog。此法費(fèi)時(shí)費(fèi)力,不值得再推薦。
利用binlog2sql快速閃回
首先,確認(rèn)你的MySQL server開啟了binlog,設(shè)置了以下參數(shù):
[mysqld] server-id?=?1 log_bin?=?/var/log/mysql/mysql-bin.log max_binlog_size?=?100M binlog-format?=?row
如果沒有開啟binlog,也沒有預(yù)先生成回滾SQL,那真的無法快速回滾了。對(duì)存放重要業(yè)務(wù)數(shù)據(jù)的MySQL,強(qiáng)烈建議開啟binlog。
隨后,安裝開源工具binlog2sql。binlog2sql是一款簡單易用的binlog解析工具,其中一個(gè)功能就是生成回滾SQL。
shell>?git?clone?https://github.com/danfengcao/binlog2sql.git shell>?pip?install?-r?requirements.txt
然后,我們就可以生成回滾SQL了。
背景:小明在20點(diǎn)多時(shí)誤刪了test庫tbl表整張表的數(shù)據(jù),需要緊急回滾。
test庫tbl表原有數(shù)據(jù) mysql>?select?*?from?tbl; +----+--------+---------------------+ |?id?|?name??|?addtime???????| +----+--------+---------------------+ |?1?|?小趙??|?2016-12-10?00:04:33?| |?2?|?小錢??|?2016-12-10?00:04:48?| |?3?|?小孫??|?2016-12-13?20:25:00?| |?4?|?小李??|?2016-12-12?00:00:00?| +----+--------+---------------------+ 4?rows?in?set?(0.00?sec) mysql>?delete?from?tbl; Query?OK,?4?rows?affected?(0.00?sec) 20:28時(shí),tbl表誤操作被清空 mysql>?select?*?from?tbl; Empty?set?(0.00?sec)
恢復(fù)數(shù)據(jù)步驟:
1、登錄mysql,查看目前的binlog文件
mysql>?show?master?status; +------------------+-----------+ |?Log_name?????|?File_size?| +------------------+-----------+ |?mysql-bin.000051?|????967?| |?mysql-bin.000052?|????965?| +------------------+-----------+
2、最新的binlog文件是mysql-bin.000052,我們?cè)俣ㄎ徽`操作SQL的binlog位置。誤操作人只能知道大致的誤操作時(shí)間,我們根據(jù)大致時(shí)間過濾數(shù)據(jù)。
shell>?python?binlog2sql/binlog2sql.py?-h127.0.0.1?-P3306?-uadmin?-p'admin'?-dtest?-ttbl?--start-file='mysql-bin.000052'?--start-datetime='2016-12-13?20:25:00' ?--stop-datetime='2016-12-13?20:30:00' 輸出: INSERT?INTO?`test`.`tbl`(`addtime`,?`id`,?`name`)?VALUES?('2016-12-13?20:25:00',?3,?'小孫');?#start?4?end?290?time?2016-12-13?20:25:46 INSERT?INTO?`test`.`tbl`(`addtime`,?`id`,?`name`)?VALUES?('2016-12-13?20:26:00',?4,?'小李');?#start?317?end?487?time?2016-12-13?20:26:26 UPDATE?`test`.`tbl`?SET?`addtime`='2016-12-12?00:00:00',?`id`=4,?`name`='小李'?WHERE?`addtime`='2016-12-13?20:26:00'?AND?`id`=4?AND?`name`='小李'?LIMIT?1;? #start?514?end?701?time?2016-12-13?20:27:07 DELETE?FROM?`test`.`tbl`?WHERE?`addtime`='2016-12-10?00:04:33'?AND?`id`=1?AND?`name`='小趙'?LIMIT?1;?#start?728?end?938?time?2016-12-13?20:28:05 DELETE?FROM?`test`.`tbl`?WHERE?`addtime`='2016-12-10?00:04:48'?AND?`id`=2?AND?`name`='小錢'?LIMIT?1;?#start?728?end?938?time?2016-12-13?20:28:05 DELETE?FROM?`test`.`tbl`?WHERE?`addtime`='2016-12-13?20:25:00'?AND?`id`=3?AND?`name`='小孫'?LIMIT?1;?#start?728?end?938?time?2016-12-13?20:28:05 DELETE?FROM?`test`.`tbl`?WHERE?`addtime`='2016-12-12?00:00:00'?AND?`id`=4?AND?`name`='小李'?LIMIT?1;?#start?728?end?938?time?2016-12-13?20:28:05
3、我們得到了誤操作sql的準(zhǔn)確位置在728-938之間,再根據(jù)位置進(jìn)一步過濾,使用flashback模式生成回滾sql,檢查回滾sql是否正確
shell>?python?binlog2sql/binlog2sql.py?-h127.0.0.1?-P3306?-uadmin?-p'admin'?-dtest?-ttbl?--start-file='mysql-bin.000052'?--start-pos=3346?--end-pos=3556?-B 輸出: INSERT?INTO?`test`.`tbl`(`addtime`,?`id`,?`name`)?VALUES?('2016-12-12?00:00:00',?4,?'小李');?#start?728?end?938?time?2016-12-13?20:28:05 INSERT?INTO?`test`.`tbl`(`addtime`,?`id`,?`name`)?VALUES?('2016-12-13?20:25:00',?3,?'小孫');?#start?728?end?938?time?2016-12-13?20:28:05 INSERT?INTO?`test`.`tbl`(`addtime`,?`id`,?`name`)?VALUES?('2016-12-10?00:04:48',?2,?'小錢');?#start?728?end?938?time?2016-12-13?20:28:05 INSERT?INTO?`test`.`tbl`(`addtime`,?`id`,?`name`)?VALUES?('2016-12-10?00:04:33',?1,?'小趙');?#start?728?end?938?time?2016-12-13?20:28:05
確認(rèn)回滾sql正確,執(zhí)行回滾語句。登錄mysql確認(rèn),數(shù)據(jù)回滾成功。
shell>?python?binlog2sql.py?-h127.0.0.1?-P3306?-uadmin?-p'admin'?-dtest?-ttbl?--start-file='mysql-bin.000052' ?--start-pos=3346?--end-pos=3556?-B?|?mysql?-h127.0.0.1?-P3306?-uadmin?-p'admin' mysql>?select?*?from?tbl; +----+--------+---------------------+ |?id?|?name??|?addtime???????| +----+--------+---------------------+ |?1?|?小趙??|?2016-12-10?00:04:33?| |?2?|?小錢??|?2016-12-10?00:04:48?| |?3?|?小孫??|?2016-12-13?20:25:00?| |?4?|?小李??|?2016-12-12?00:00:00?| +----+--------+---------------------+
至此,不用再擔(dān)心被炒魷魚了。
常見問題
有人會(huì)問,我DDL誤操作了怎么快速回滾?比如drop了一張大表。
很難做到。因?yàn)榧词乖谠趓ow模式下,DDL操作也不會(huì)把每行數(shù)據(jù)的變化記錄到binlog,所以DDL無法通過binlog回滾。實(shí)現(xiàn)DDL回滾,必須要在執(zhí)行DDL前先備份老數(shù)據(jù)。確實(shí)有人通過修改mysql server源碼實(shí)現(xiàn)了DDL的快速回滾,我找到阿里的xiaobin lin提交了一個(gè)patch。但據(jù)我所知,國內(nèi)很少有互聯(lián)網(wǎng)公司應(yīng)用了這個(gè)特性。原因的話,我認(rèn)為最主要還是懶的去折騰,沒必要搞這個(gè)低頻功能,次要原因是會(huì)增加一些額外存儲(chǔ)。
所以,DDL誤操作的話一般只能通過備份來恢復(fù)。如果公司連備份也不能用了,那真的建議去買張飛機(jī)票了。干啥?跑唄
mysql除了binlog2sql,是否還有其他回滾工具?
當(dāng)然有。阿里彭立勛對(duì)mysqlbinlog增加了flashback的特性,這應(yīng)該是mysql最早有的flashback功能,彭解決的是DML的回滾,并說明了利用binlog進(jìn)行DML閃回的設(shè)計(jì)思路。DDL回滾特性也是由阿里團(tuán)隊(duì)提出并實(shí)現(xiàn)的。這兩個(gè)功能是有創(chuàng)新精神的,此后出現(xiàn)的閃回工具基本都是對(duì)上面兩者的模仿。另外,去哪兒開源的Inception是一套MySQL自動(dòng)化運(yùn)維工具,這個(gè)就比較重了,支持DML回滾,還不是從binlog回滾的,是從備份回滾的,也支持DDL回滾表結(jié)構(gòu),數(shù)據(jù)是回滾不了滴~ 還有一種做法叫slave延時(shí)備份,搞臺(tái)不加業(yè)務(wù)流量的slave,故意延遲一段時(shí)間,這其實(shí)是在傳統(tǒng)辦法的基礎(chǔ)上去除了實(shí)例恢復(fù)這步。此法會(huì)額外消耗一臺(tái)機(jī)器,我們不推薦這么做。
如有mysql回滾相關(guān)的優(yōu)秀工具優(yōu)秀文章遺漏,煩請(qǐng)告知。
以上就是MySQL誤操作后快速恢復(fù)數(shù)據(jù)的方法的內(nèi)容,更多相關(guān)內(nèi)容請(qǐng)關(guān)注PHP中文網(wǎng)(www.php.cn)!