歡迎來到Linux教程網
Linux教程網
Linux教程網
Linux教程網
Linux教程網 >> Linux基礎 >> Linux技術 >> rsync+inotify實現多台web數據動態同步操作步驟

rsync+inotify實現多台web數據動態同步操作步驟

日期:2017/3/1 18:04:38   编辑:Linux技術

*背景:由於無存儲共享設備,web集群中的代碼均存放在本地,最終導致web節點之間的數據無法一致。
*解決辦法:采用rsync+inotify,實現多台web數據動態同步
*解決思路:比如有a、b、c、d四台web,為解決哪台服務器為源數據服務器,我們在A服務器上安裝rsync+inotify,然後將一個二級域名指向A服務器,這樣以後網站編輯、開發人員之間訪問二級域名進行日常網站更新,A服務器在檢測到本地有數據更新時,便動態(觸發式)向其它服務器發送更新數據。
*注意:一定要使用rsync相同的版本,否則會出現未知錯誤。
*選擇rsync+inotify的理由:在常規的數據同步應用案例中,大多數人會選擇使用rsync來完成數據同步,選擇rsync+inotify的理由如下

復制代碼代碼如下:
1、服務器性能:rsync只能實現定時更新,無論網站有無文件更新,rsync都會按著定時任務去檢查文件是否有更新,當數據文件較大時會使服務器性能下降;而rsync+inotify
為觸發式更新,也就是說只有當某個文件發生改動時才會更新,這樣一來對服務器性能影響較小。
2、數據實時性:如果選擇rsync,每隔多長時間同步一次數據是個問題,時間越短,對性能影響就越大。時間太長,用戶/編輯無法接受。采用rsync+inotify可實現實時更新,
當A服務器文件有更新時,其它服務器立即更新

*環境拓撲

復制代碼代碼如下:
A:192.168.1.101
B:192.168.1.102
C:192.168.1.103
D:192.168.1.104
注:數據源服務器為A,目標服務器為B、C、D

*一、目標服務器安裝rsync (在B、C、D服務器上操作,安裝配置均一樣)
*安裝rsync 下載地址:http://rsync.samba.org/

復制代碼代碼如下:
cd /data/software
wget https://rsync.samba.org/ftp/rsync/rsync-3.0.9.tar.gz
tar zxvf rsync-3.0.9.tar.gz
cd rsync-3.0.9
./configure
make
make install

*安裝完成後顯示信息

復制代碼代碼如下:
mkdir -p /usr/local/bin
/usr/bin/install -c -m 755 rsync /usr/local/bin
mkdir -p /usr/local/share/man/man1
mkdir -p /usr/local/share/man/man5
if test -f rsync.1; then /usr/bin/install -c -m 644 rsync.1 /usr/local/share/man/man1; fi
if test -f rsyncd.conf.5; then /usr/bin/install -c -m 644 rsyncd.conf.5 /usr/local/share/man/man5; fi

*配置rsync
*#vi /etc/rsync.conf 加入如下內容

復制代碼代碼如下:
uid = root
gid = root
use chroot = no
max connections = 20
strict modes = yes
log file = /data/logs/rsyncd/rsyncd.log
pid file = /data/logs/rsyncd/rsyncd.pid
lock file = /data/logs/rsyncd/rsync.lock
log format = %t %a %m %f %b
[web]
path = /data/vhosts/it121net/
auth users = username
read only = no
hosts allow = 192.168.1.0/24 #可以是IP段,也可以是IP地址
list = no
uid = root
gid = root
secrets file = /etc/rsync.passwd
ignore errors = yes

*創建目錄,用於存放日志。

復制代碼代碼如下:
mkdir /data/logs/rsyncd

*創建認證
*#vi /etc/rsync.passwd

復制代碼代碼如下:
username:passwd

*#chmod 600 /etc/rsync.passwd
*啟動rsync,啟動後使用netstat查看,會發現系統已啟動873端口

復制代碼代碼如下:
# rsync --daemon --config=/etc/rsync.conf

*加入開機啟動

復制代碼代碼如下:
# echo "rsync --daemon --config=/etc/rsync.conf" >>/etc/rc.local

*關閉

復制代碼代碼如下:
killall rsync

*二、源服務器安裝rsync+inotify (在a服務器上操作)
*安裝rsync(僅安裝即可,不需配置)

復制代碼代碼如下:
cd /data/software
wget https://rsync.samba.org/ftp/rsync/rsync-3.0.9.tar.gz
tar zxvf rsync-3.0.9.tar.gz
cd rsync-3.0.9
./configure
make
make install

*echo "passwd" > /etc/rsync-client.passwd
*chmod 600 /etc/rsync-client.passwd
*安裝inotify 下載地址:https://github.com/rvoicilas/inotify-tools/wiki/

復制代碼代碼如下:
cd /data/software
wget http://cloud.github.com/downloads/rvoicilas/inotify-tools/inotify-tools-3.14.tar.gz
tar zxvf inotify-tools-3.14.tar.gz
cd inotify-tools-3.14
./configure
make
make install

*創建啟動腳本
*#vi /etc/rsync-web.sh 加入如下內容

復制代碼代碼如下:
#!/bin/sh
SRC=/data/vhosts/it121net/
DES=web
WEB2=192.168.1.102
WEB3=192.168.1.103
WEB4=192.168.1.104
USER=username
/usr/local/bin/inotifywait -mrq -e create,move,delete,modify $SRC | while read D E F
do
rsync -ahqzt --password-file=/etc/rsync-client.passwd --delete $SRC $USER@$WEB2::$DES
rsync -ahqzt --password-file=/etc/rsync-client.passwd --delete $SRC $USER@$WEB3::$DES
rsync -ahqzt --password-file=/etc/rsync-client.passwd --delete $SRC $USER@$WEB4::$DES
done
#注意:網絡上面大部分都是顯示一個中槓,可能是編碼的事情,實際是應該是兩個槓。

*增加權限

復制代碼代碼如下:
#chmod +x /etc/rsync-web.sh

*啟動腳本

復制代碼代碼如下:
#nohup /etc/rsync-web.sh & //必須使用nohup放入後台執行,否則關閉終端後此腳本進程會自動結束
/etc/rsync-web.sh &

*關閉腳本

復制代碼代碼如下:
sudo pkill rsync
sudo pkill inotifywait

*@ERROR: chdir failed rsync error: error starting client-server protocol (code 5) at main.c(1503) [sender=3.0.6]解決辦法

復制代碼代碼如下:
setsebool -P rsync_disable_trans on

*rsync安裝路徑(注意查看)

復制代碼代碼如下:
/usr/bin/rsync
/usr/local/bin/rsync
/etc/xinetd.d/rsync

Copyright © Linux教程網 All Rights Reserved