亚洲乱码中文字幕综合,中国熟女仑乱hd,亚洲精品乱拍国产一区二区三区,一本大道卡一卡二卡三乱码全集资源,又粗又黄又硬又爽的免费视频

MySQL備份恢復設計思路

 更新時間:2020年10月14日 14:23:29   作者:老葉茶館  
這篇文章主要介紹了MySQL備份恢復設計思路,幫助大家更好的維護數(shù)據(jù)庫,感興趣的朋友可以了解下

背景

首先交代一下背景,由于某些因素的限制,我們公司目前的備份策略采用的是隔天全備的方案,增量備份則使用的是binlog server的方式,那么如何快速恢復就成為了我們需要思考的問題

恢復需求

根據(jù)我以往的一些經(jīng)驗來說,通常需要從備份恢復數(shù)據(jù)的場景有如下幾種:

1.被誤刪庫了

2.被誤刪表了,類型為TRUNCATE或者DROP

3.被誤刪列了,類型為ALTER ... DROP COLUMN

4.被誤刪數(shù)據(jù)了,類型為DELETE或者UPDATE或者REPLACE

5.表空間損壞或出現(xiàn)壞塊了

根據(jù)場景來說,我們可以大致分為兩類:

  • 第一類為不可逆恢復,也就是通常的DDL,比如上述的1、2、3、5等場景
  • 第二類為可逆的恢復,通常可以利用binlog進行回滾(要求binlog格式為ROW,binlog_image為FULL),也就是對應上述的場景4

對于第二類的恢復需求一般來說都比較容易處理,可以利用binlog回滾工具,例如業(yè)界比較著名的有binlog2sql以及MyFlash等,這里暫不贅述,我們重點來討論第一類需求。

為了達到快速恢復的目的,業(yè)界DBA經(jīng)常會采用的方式就是部署一個延遲從庫來解決,我們公司目前 所有的核心DB都部署了延遲從庫。但是即便有了延遲從庫,假設我們錯過了延遲的時間,或者在后續(xù)利用延遲從庫恢復的時候指定錯了位點,導致了誤刪DDL同樣應用到了從庫,這個時候我們就沒有辦法利用延遲從庫這根救命稻草了。

全備恢復(異機恢復)

此時,我們只能通過備份來進行數(shù)據(jù)恢復了。首先我們需要恢復全備,通常來說就是xtrabackup備份的物理備份了。假設你的備份在遠程的機器上,那么你可能需要做如下幾步動作來進行全備恢復:

  1. 將備份scp或者rsync到目標實例機器上
  2. 假設備份文件是壓縮的情況下,需要解壓
  3. 解壓完成后,需要apply redo log
  4. 更改文件權限
  5. 假設你直接將文件拷貝到的目標實例的datadir目錄下,那么這一步你就可以直接啟動mysqld,假設不是,那么你還需要將數(shù)據(jù)文件move-back或者copy-back到目標實例的datadir
  6. 實例啟動

增備恢復

到這里,全備已經(jīng)恢復完成了,接下來需要做的就是增量恢復了。按照我們之前的備份方案,我們需要通過binlog來完成增量數(shù)據(jù)的恢復。對于binlog恢復,我們通常需要以下幾個步驟

  1. 確定全備對應的binlog位點,也就是需要恢復的起始點
  2. 解析主庫的binlog,確定誤刪數(shù)據(jù)的位點,作為我們恢復的終點
  3. 利用mysqlbinlog —start-position —stop-position+管道的方式,將binlog恢復到目標實例上

binlog恢復的方式有很多種,你可以用的是原先master上的binlog,也可以用binlogserver上的binlog,需要做的就是找到binlog恢復的終點即可。

增備恢復優(yōu)化

到這里,你可能會覺得,利用binlog恢復有點麻煩。確實是這樣的,利用mysqlbinlog命令并沒有辦法指定恢復到哪個GTID,只能通過解析binlog,找到需要恢復到的GTID對應的pos位點才行,這對于自動化來說實現(xiàn)起來會比較麻煩。另外,如果利用mysqlbinlog命令恢復,屬于單線程恢復,假設需要恢復的binlog量比較多的話,那么這個增量恢復的時間可想而知。

那么有什么辦法能加速binlog應用呢?這里我們就想到了MySQL5.7的并行復制,如果我們能用到sql thread的并行復制,是不是這個問題就解決了呢?

master上binlog恢復

我們回到全備恢復的位點,我們將新實例作為原先的master的slave,然后恢復到指定的GTID位置就可以了呢?沒錯,這是一種非常簡便又輕松還不容易出錯的方式,并且還可以利用并行復制的原理來加速binlog應用的目的。但是這種方式的一個要求就是原先的master最老的binlog包含了我們需要的起始恢復位點,這個很容易想到,所以,這將成為我們首選的恢復方式。

binlogserver上binlog恢復

假設原先master上的binlog已經(jīng)被purge了,那么我們那需要從binlog上去恢復。有人可能會想到將binlogserver上的binlog拷貝到原先的master上,然后通過修改binlog index來達到注冊的目的,實際上這并不可取,具體原因可以見《手動注冊binlog文件造成主從異常》。

我們可以采取的方式是什么呢?就是利用binlogserver做成偽裝master,然后將從庫change上去,其思想就是欺騙slave,讓slave的io_thread將缺失的binlog拉取過來,sql_thread并行應用binlog event(我們將在下一節(jié)具體演示這種方式)。

優(yōu)化后的恢復流程

經(jīng)過優(yōu)化以后,我們的增備恢復流程就變成了,首先通過master上的binlog進行恢復,如果發(fā)現(xiàn)master上的binlog已經(jīng)被purge了,那么通過binlogserver上的binlog進行恢復,這樣一來我認為是比較科學合理的恢復流程。

各種恢復方式時效性對比

業(yè)務恢復

到這里,我們已經(jīng)完成了全量+增量的備份數(shù)據(jù)恢復,這個時候需要同研發(fā)確認數(shù)據(jù),確認完成以后將對應的表恢復到原先的master,通常采用的方式有:

  1. mysqldump導出+導入目標實例
  2. 表空間傳輸

總結

本節(jié)主要介紹了備份恢復的設計流程,在我們沒有辦法優(yōu)化全備恢復的情況下,我們通過優(yōu)化增量備份方式和流程達到縮短恢復時間的目的。并且需要說明的一點是,本節(jié)介紹的目前我還沒有完全測試,不保證每個點都是正確的,還需要進一步驗證,驗證通過以后我也會通知大家,并且結合到現(xiàn)有的數(shù)據(jù)庫運維平臺,做到自動化恢復

最后還是提醒幾點:

  1. 數(shù)據(jù)是無形的財產,請廣大DBA朋友務必做好備份并做好備份驗證
  2. 如果有條件的情況下,盡量部署延遲從庫
  3. 做好恢復預案,免得恢復的時候手忙腳亂,菊花打緊
  4. 根據(jù)場景選擇合適的恢復手段,盡量縮短恢復時間

以上就是MySQL備份恢復設計思路的詳細內容,更多關于MySQL備份恢復的資料請關注腳本之家其它相關文章!

相關文章

  • Mysql和redis緩存不一致問題的解決方案

    Mysql和redis緩存不一致問題的解決方案

    在高并發(fā)的情況下,如果所有的數(shù)據(jù)都從數(shù)據(jù)庫中去讀取,那再強大的數(shù)據(jù)庫系統(tǒng)都承受不了這個壓力,因此我們會將部分數(shù)據(jù)放入緩存中,比如放入redis中,這篇文章主要給大家介紹了關于Mysql和redis緩存不一致問題的解決方案,需要的朋友可以參考下
    2022-08-08
  • Mysql的longblob字段插入數(shù)據(jù)問題解決

    Mysql的longblob字段插入數(shù)據(jù)問題解決

    在使用mysql的過程中,有個問題就是mysql的優(yōu)化,mysql中l(wèi)ongblob字段在5.5版本中默認的為1M,需要解決問題的朋友可以參考下
    2014-01-01
  • 關于MySQL日期類型的選擇建議

    關于MySQL日期類型的選擇建議

    在軟件開發(fā)中,時間記錄是不可或缺的功能,如記錄操作時間、交易時間等,通常不建議使用字符串存儲日期,因為它占用空間大,并且效率低下,MySQL提供的Datetime和Timestamp是常用的時間存儲類型,Datetime沒有時區(qū)信息,而Timestamp與時區(qū)有關
    2024-10-10
  • 詳解mysql中explain的type

    詳解mysql中explain的type

    這篇文章主要介紹了mysql中explain的type的相關資料,幫助大家更好的理解和使用MySQL,感興趣的朋友可以了解下
    2020-11-11
  • lnmp重置mysql數(shù)據(jù)庫root密碼的兩種方法

    lnmp重置mysql數(shù)據(jù)庫root密碼的兩種方法

    這篇文章給大家介紹了lnmp重置mysql數(shù)據(jù)庫root密碼的兩種方法,第一種方法通過腳本重置密碼,第二種方法通過命令修改,具體操作方法大家參考下本文
    2017-07-07
  • MySQL利用索引優(yōu)化ORDER BY排序語句的方法

    MySQL利用索引優(yōu)化ORDER BY排序語句的方法

    這篇文章主要介紹了MySQL利用索引優(yōu)化ORDER BY排序語句的方法,幫助大家更好的理解和使用MySQL數(shù)據(jù)庫,感興趣的朋友可以了解下
    2020-10-10
  • mysql 日期和時間格式轉換實現(xiàn)語句

    mysql 日期和時間格式轉換實現(xiàn)語句

    對于每個類型擁有的值范圍以及并且指定日期何時間值的有效格式的描述見7.3.6 日期和時間類型。
    2009-10-10
  • Mysql CAST函數(shù)的具體使用

    Mysql CAST函數(shù)的具體使用

    本文主要介紹了Mysql CAST函數(shù)的具體使用,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧
    2022-08-08
  • MySQL 存儲過程和"Cursor"的使用方法

    MySQL 存儲過程和"Cursor"的使用方法

    本文中介紹了一個MySQL的存儲過程,其中涉及Cursor的使用
    2008-12-12
  • MySQL5.7完全卸載步驟詳解

    MySQL5.7完全卸載步驟詳解

    這篇文章主要介紹了MySQL5.7完全卸載的詳細步驟以及把中間遇到的問題做了分析,需要的朋友跟著操作下吧。
    2018-02-02

最新評論