目錄
- 1、簡介
- 2、備份和恢復(fù)的簡單定義
- 3、恢復(fù)計劃需要考慮的幾個因素
- 4、備份
- 4.1、備份內(nèi)容包括什么?
- 4.2、物理備份與邏輯備份
- 4.3、Binlog備份
- 4.3.1、備份Binlog的一些策略
- 4.3.2、老Binlog的清理
- 4.3.3、Binlog備份的幾點注意事項
- 4.4、增量備份與差異備份
- 4.5、從庫備份
- 4.6、其他注意事項
- 4.6.1、在線備份與離線備份
- 4.6.2、數(shù)據(jù)一致性
- 4.6.3、定期進行備份恢復(fù)測試,確認整個恢復(fù)過程需要的資源
- 小結(jié)
1、簡介
數(shù)據(jù)無價,MySQL作為一個數(shù)據(jù)庫系統(tǒng),其備份自然也是非常重要且有必要去做。備份的理由千千萬,預(yù)防故障,安全需求,回滾,審計,刪了又改的需求等等,備份的重要性不言而喻。除了備份本身, 如何使用備份來恢復(fù) 服務(wù)也是一項重點內(nèi)容,不能用來恢復(fù)的備份沒有意義。本文主要會針對備份和恢復(fù)這兩方面做一些簡單的介紹。
本文為《高性能MySQL》備份相關(guān)章節(jié)的讀書筆記。
2、備份和恢復(fù)的簡單定義
正如簡介所說,備份人盡皆知,也很容易引起人的重視。根據(jù)需求寫定期腳本,或者使用其他方式都是比較常見的。但是恢復(fù)就沒有那么引人注目了。比如說,也許會每周/每天定期進行自動備份。但是多久會進行一次備份的恢復(fù)測試?備份的內(nèi)容是否完成?是否可用于恢復(fù)?如果出現(xiàn)故障,恢復(fù)的流程是否易操作?
備份只是數(shù)據(jù)源, 如何使用數(shù)據(jù)源 , 徹底恢復(fù)系統(tǒng) 這個過程。也非常重要。備份與恢復(fù),都是MySQL運維中需要掌握的內(nèi)容。
備份的意義在于恢復(fù)。如果不能恢復(fù),那就不叫備份(比如RAID陣列不是備份,如果DROP DATABASE,RAID陣列不能恢復(fù))
[還原] 和 [恢復(fù)] 的區(qū)別:
- 還原:僅指將備份文件中的內(nèi)容提取出來并加載。
- 恢復(fù):包括還原備份文件在內(nèi)的一系列措施,目的是讓服務(wù)恢復(fù)正常運行,比如重啟MySQL,修改配置等其他操作 。
也就是說,恢復(fù)是要恢復(fù)到異常出前,采取的所有操作(比如修改參數(shù),重啟服務(wù)等)。不僅僅只是還原備份。
3、恢復(fù)計劃需要考慮的幾個因素
恢復(fù)計劃在設(shè)計的時候,需要考慮一些因素,從而根據(jù)不同的需求進行更好的規(guī)劃??梢愿鶕?jù)RPO(恢復(fù)點目標)和RTO(恢復(fù)時間目標)這兩個需求來協(xié)助制定合適的恢復(fù)策略。
- RPO(恢復(fù)點目標):可以容忍丟失多少數(shù)據(jù)?(需要恢復(fù)所有數(shù)據(jù),還是能容忍上一次備份以來的數(shù)據(jù)丟失?)
- RTO(恢復(fù)時間目標):需要等待多久將數(shù)據(jù)恢復(fù)?(用戶能接受到什么程度)
也許還需考慮:需要恢復(fù)什么?(整個服務(wù)器,單個庫,單個表,還是事務(wù))
其次,恢復(fù)計劃需要定期進行測試,抽出數(shù)據(jù)測試備份確實有效、實際進行一次完整的備份恢復(fù),熟悉整個恢復(fù)流程,確保真正發(fā)生問題時,可以有條不紊的完成恢復(fù)。
4、備份
4.1、備份內(nèi)容包括什么?
最簡單的策略就是 只備份數(shù)據(jù)和表定義 。但是恢復(fù)數(shù)據(jù)庫需要更多內(nèi)容,如果能備份的越充足,那么恢復(fù)起來也就更容易。(主要還是 根據(jù)需求 )
比如可以根據(jù)實際情況,考慮備份如下內(nèi)容:
1、Binlog和InnoDB事務(wù)日志。
2、主/從庫配置文件。
3、數(shù)據(jù)庫操作系統(tǒng)配置(cron、腳本、內(nèi)核參數(shù))
或者說,根據(jù)需要進行備份內(nèi)容的擴展。如果對于數(shù)據(jù)庫恢復(fù)、甚至重建有很高需求(比如要求更快恢復(fù)),那么備份更多的內(nèi)容也必不可少。如果需要有從0恢復(fù)數(shù)據(jù)庫的能力,那需要做更多工作。
4.2、物理備份與邏輯備份
備份種類 |
邏輯備份 |
物理備份 |
簡介 |
利用mysqldump等命令實現(xiàn)備份 |
直接復(fù)制數(shù)據(jù)庫文件 |
優(yōu)點 |
可以文本編輯,恢復(fù)簡單,使用mysqldump備份靈活。 |
足夠直觀,備份和恢復(fù)過程,本質(zhì)上就是文件的移動?;謴?fù)速度更快。MySQL服務(wù)器幾乎不需要執(zhí)行操作。 |
缺點 |
備份和恢復(fù)都需要MySQL服務(wù)參與、且占用CPU資源。有可能很慢 |
InnoDB的原始文件通常比邏輯備份大得多。 |
物理備份和邏輯備份的一點抉擇:
- 對于大數(shù)據(jù)庫,必須有物理備份。邏輯備份太慢,也可考慮基于快照的備份做輔助。
- 對于小數(shù)據(jù)庫,邏輯備份幾乎就可以了。
物理備份簡單高效,邏輯備份盡量也要做?!緝烧叨家?,看具體需求和資源分配】
其次:除非經(jīng)過測試,否則不能假設(shè)備份可用。比如使用 mysqlcheck -A 測試數(shù)據(jù)庫。
4.3、Binlog備份
Binlog也是備份中的重要一環(huán),因為基于時間點的恢復(fù)需要用到它。而且Binlog一般很小,頻繁的備份也較容易實現(xiàn)。如果有某個時間點的數(shù)據(jù)備份,加上自那以后的所有Binlog,就可以回滾所有變動。
4.3.1、備份Binlog的一些策略
FLUSH LOGS
--log_slave_updata
需要注意的是,expire_log_days是通過 日志文件的修改時間 來判斷的,而不是內(nèi)容。(如果一直只有一個Binlog文件,可能就不會清理)。所以一定要使用 FLUSH LOGS 定期刷新Binlog。
4.3.2、老Binlog的清理
最好使用expire_log_days來進行自動的清理,保留一定天數(shù)。如果需要用cron清理。那么 不要使用 find+rm配置的cron清理日志。
0 3 * * * /usr/bin/mysql /var/log/mysql -mtime +N -name "mysql-bin.[0-9]"* | xargs rm
使用如下cron代替:
0 3 * * * /usr/bin/mysql -e "PURGE MASTER LOGS BEFORE CURRENT_DATE - INTERVAL N DAY"
4.3.3、Binlog備份的幾點注意事項
- 增長保存時間只是一種配置,不代表Binlog本身就不需要備份。Binlog仍然需要定期備份,以便可以結(jié)合最近的備份使用。
- 需要注意的是,從庫也使用Binlog。所以需要 區(qū)分從庫和備份的Binlog管理 。
4.4、增量備份與差異備份
增量備份:自任意類型備份后,改動的所有內(nèi)容的備份。
差異備份:特指自上次 全備份 之后,改動的所有內(nèi)容的備份。
也就是說,差異備份基于全備份。而增量備份基于任意備份(比如某一個指定的差異備份。
差異備份可選項:
雖然這樣做差異備份可以提高恢復(fù)速度。但是全備份還是很有必要的。( 全備份可以頻率低,但是必須有 )。
4.5、從庫備份
在從庫中備份,有時候是一個 可選項 ,不會干擾到主庫,避免給主庫增加更多的負載。其次,當計劃從從庫備份的時候,要保存更多信息,比如從庫相對于主庫的位置(偏移)等。
首先 從庫不等于備份 ,從庫和主庫數(shù)據(jù)不匹配是很常見的。其次、從從庫備份確實可以減輕主庫備份時的負載,但是不夠好。穩(wěn)定起見,還是建議進行主庫備份、全備份。
4.6、其他注意事項
4.6.1、在線備份與離線備份
離線備份是最簡單最安全的。也是一致性最好的。問題就是,大部分數(shù)據(jù)庫不能接受停機備份。所以基本還是用在線備份,或者說不停機備份
可以考慮在業(yè)務(wù)低峰期進行在線備份,即使負載增大也不會有太大影響。
4.6.2、數(shù)據(jù)一致性
數(shù)據(jù)一致性:對于多個表之間數(shù)據(jù)的一致性要求。(比如兩個邏輯相關(guān)的操作分在了兩個事務(wù)內(nèi),而備份在兩個事務(wù)之間執(zhí)行,就會導(dǎo)致數(shù)據(jù)不一致)
InnoDB可以在轉(zhuǎn)儲一組相關(guān)表的時候,開始一個事務(wù),這樣可以很大程度上保證數(shù)據(jù)的一致性。
但是也要注意,如果事務(wù)設(shè)置的不合理,比如一組相關(guān)表的修改分在了兩個事務(wù)內(nèi),這仍然會導(dǎo)致數(shù)據(jù)不一致。( 一組表的相關(guān)操作需要確保在一個事務(wù)內(nèi) )
4.6.3、定期進行備份恢復(fù)測試,確認整個恢復(fù)過程需要的資源
能恢復(fù)的備份才有價值,不是有備份就可以
小結(jié)
本文講解了一些備份的基本知識和概念,包括一些基本概念、恢復(fù)的重要性、備份和恢復(fù)的簡單策略。還提及到了備份內(nèi)容的選擇、差異/增量備份、Binlog備份等。后續(xù)還需要繼續(xù)學(xué)習(xí),了解備份和恢復(fù)的具體操作方法和實踐。
以上就是淺析MySQL 備份與恢復(fù)的詳細內(nèi)容,更多關(guān)于MySQL 備份與恢復(fù)的資料請關(guān)注腳本之家其它相關(guān)文章!
您可能感興趣的文章:- MySQL 邏輯備份與恢復(fù)測試的相關(guān)總結(jié)
- 詳解Mysql之mysqlbackup備份與恢復(fù)實踐
- MySQL5.7 mysqldump備份與恢復(fù)的實現(xiàn)
- 詳解mysql的備份與恢復(fù)
- MySQL系列之十二 備份與恢復(fù)