Linux inotify實時備份實現(xiàn)方法詳解
實時復(fù)制是企業(yè)數(shù)據(jù)備份最重要的方式,主要用于用戶提交的數(shù)據(jù)的備份,對于用戶提交到服務(wù)器上的普通文件(圖片、壓縮包、視頻、文檔等),可采用 inotify/sersync+rsync實時備份方式;對于數(shù)據(jù)文件還有較復(fù)雜的分布式存儲工具自身可以實現(xiàn)將數(shù)據(jù)同時備份成多份,例如: FastDFS、 GlusterFS等;對于提交到數(shù)據(jù)庫中的數(shù)據(jù),可使用數(shù)據(jù)庫的主從復(fù)制(例如: MySQL、 Oracle)方式備份,這是軟件自帶的實時復(fù)制備份方式。有的企業(yè)會采用更多思路實現(xiàn)數(shù)據(jù)同時變?yōu)槎喾?例如:程序業(yè)務(wù)邏輯在數(shù)據(jù)提交時,同時提交到兩個服務(wù)器。
模擬實時復(fù)制的部署準(zhǔn)備
實時復(fù)制軟件介紹
常用軟件:inotify-tools、sersync(推薦)
實時復(fù)制inotify機制介紹
linux內(nèi)核從2.6.13起加入了Inotify支持,它是一種異步的系統(tǒng)事件監(jiān)控機制,通過inotify可以監(jiān)控文件系統(tǒng)中添加、刪除、修改、移動等各種事件,利用這個內(nèi)核接口,第三方軟件(如inotify-tools、sersync)可以監(jiān)控文件系統(tǒng)下各文件的變化情況,進而做出實時響應(yīng)。
注:sersync軟件是在inotify基礎(chǔ)上進行開發(fā)的,功能更加強大,支持配置文件配置,定時重試復(fù)制,過濾機制,提供接口做CDN數(shù)據(jù)更新,支持多線程操作。
優(yōu)缺點
inotify優(yōu)點:監(jiān)控文件系統(tǒng)事件變化,通過復(fù)制工具實現(xiàn)實時數(shù)據(jù)復(fù)制。支持多線程實時復(fù)制。
inotify缺點:實測并發(fā)如果大于200個文件(10-100k),復(fù)制會有延遲。
解決思路:前臺爭取時間,如我們注冊賬號或上傳數(shù)據(jù)點擊提交后,頁面顯示幾秒后返回原頁面。
inotify+rsync項目實踐
1.確保rsync服務(wù)可用,可在nfs01服務(wù)器上推拉數(shù)據(jù)到backup服務(wù)器上。
2.檢查系統(tǒng)支持情況
①內(nèi)核版本必須大于2.6.13 ②必須有以下三個文件
3.測試inotify-tools軟件
[root@nfs01 ~]# yum install inotify-tools -y
開兩個窗口測試:
編寫腳本:
注:打開另一nfs01窗口,創(chuàng)建、修改、刪除文件,并在backup服務(wù)器中查看是否實時同步。
4.測試sersync軟件
上傳軟件包
解壓
tar -xf sersync2.5.4_64bit_binary_stable_final.tar.gz -C /application/sersync/
sersync的配置文件是一個xml文件,先備份一下 cp confxml.xml{,.ori}
修改配置文件(輸入 :set nu 可顯示行號):
執(zhí)行
因為sersync不是yum安裝的,無法使用systemctl命令開啟、關(guān)閉、自啟
以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。
- Linux 通過Rsync+Inotify實現(xiàn)本、異地遠(yuǎn)程數(shù)據(jù)實時同步功能
- Linux中使用Pyinotify模塊實時監(jiān)控文件系統(tǒng)更改
- Linux inotify監(jiān)聽文件狀態(tài)的操作方法
- linux系統(tǒng)中rsync+inotify實現(xiàn)服務(wù)器之間文件實時同步
- linux系統(tǒng)中通過rsync+inotify實現(xiàn)網(wǎng)頁自動同步
- linux下通過rsync+inotify 實現(xiàn)數(shù)據(jù)實時備份(遠(yuǎn)程容災(zāi)備份系統(tǒng))
相關(guān)文章
在Apache服務(wù)器上利用Varnish優(yōu)化移動端訪問的方法
這篇文章主要介紹了在Apach服務(wù)器上利用Varnish優(yōu)化移動端訪問的方法,包括清除緩存等常用操作的介紹,需要的朋友可以參考下2015-06-06ubuntu 16.04LTS 開機啟動自動更換壁紙的實現(xiàn)方法
下面小編就為大家分享一篇ubuntu 16.04LTS 開機啟動自動更換壁紙的實現(xiàn)方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2018-02-02在Linux中對存儲設(shè)備進行分區(qū)和格式化的操作步驟
在 Linux 系統(tǒng)上準(zhǔn)備新磁盤以供使用是一個簡單的過程,雖然有許多工具、文件系統(tǒng)格式和分區(qū)方案可能會因為特殊需求而改變這個過程,但基本原理仍然是一樣的,文中給大家詳細(xì)介紹了在Linux中對存儲設(shè)備進行分區(qū)和格式化的操作步驟,需要的朋友可以參考下2024-10-10Linux加入windows ad域步驟詳解(winbindsamba方案)
本文主要實驗centos加入windows AD的方法,大家參考使用2013-12-12基于Linux搭建Apache網(wǎng)站服務(wù)配置詳解
這篇文章主要介紹了基于Linux搭建Apache網(wǎng)站服務(wù)配置詳解,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-05-05