CentOS6.5使用rsync遠程同步


需達成目標在服務器(192.168.18.211)端搭建 rsync 服務,

          將 /root/rsync-server/ 目錄同步到客戶端 /root/rsync-local 目錄

Linux系統:CentOS 6.5

一、由於CentOS6.5已經默認已經安裝了 rsync,如若沒有安裝,可以參考如下方法:

1、檢查是否安裝了 rsync :

rpm -qa rsync

2、如果沒有安裝可以使用yum安裝

yum install -y rsync

3、啟動 rsync : 

/etc/init.d/xinetd start 
或 service xinetd start

二、服務端(192.168.18.211)[每個人的IP肯定都不一樣]

1、建立 rsync 賬號密碼文件:

 vim /root/rsync_user  , 添加一行  賬號 : 密碼

root:123456 

2、修改權限

chmod 600 rsync_user

3、創建 rsync 全局配置文件

vim /etc/rsyncd.conf (默認沒有此配置文件,手動添加該文件),內容如下:
uid = nobody  // 傳輸文件時,執行的用戶 gid = nobody      // 傳輸文件時,執行的用戶組 use chroot = yes  // 在傳輸文件之前,服務器守護程序在將chroot 到文件系統中的目錄中 pid file = /var/run/rsyncd.pid  // 告知進程寫到 /var/run/rsyncd.pid 文件中 log file = /var/log/rsyncd.log  // 日志路徑 [tools]            // 模塊名,主要是定義服務器哪個目錄要被同步 path = /root/rsync-server    // 指定文件目錄所在位置,這是必須指定的 comment = Rsync share test      // 注釋可以自己定義 auth users = root        // 認證用戶是 root,必須是服務器上真實存在的用戶 secrets file = /root/rsync_user  // 密碼存在哪個文件 read only = yes  // 是只讀選擇,也就是說,不讓客戶端上傳文件到服務器

4、修改  /etc/xinetd.d/rsync

vim /etc/xinetd.d/rsync

關於super daemon 配置文件更詳細的內容請參考 《鳥哥的linux私房菜基礎篇 559頁》

三、客戶端(192.168.19.25)

1、設置密碼文件:

 vim /root/rsync_pass  // 只需寫登錄用戶密碼,要與服務器端設置密碼一致

123456 

2、修改權限

chmod 600 rsync_pass

3、創建接收服務器文件的目錄

mkdir rsync-local

4、在同步服務文件之前,可以先瀏覽一下服務中帶共享的文件,此處可以先查看一下共享的文件

rsync root@192.168.18.211::tools

5、手動同步共享目錄

rsync -az --password-file=/root/rsync_pass root@192.168.18.211::tools /root/rsync-local

6、使用cron例行性任務定時從服務器同步文件

crontab -e 
0 5 * * * /usr/bin/rsync -a --password-file=/root/rsync_pass root@192.168.18.211::tools /root/rsync-local

 

四、附rsyncd.conf服務器的配置詳解

1、全局定義

  uid = nobody   
  gid = nobdoy  

  注:服務器端傳輸文件時,要發哪個用戶和用戶組來執行,默認是nobody。 如果用nobody 用戶和用戶組,可能遇到權限問題,有些文件從服務器上拉不下來。所以我就偷懶,為了方便,用了root 。不過您可以在定義要同步的目錄時定義的模塊中指定用戶來解決權限的問題。

  use chroot = yes 

  注:用chroot,在傳輸文件之前,服務器守護程序在將chroot 到文件系統中的目錄中,這樣做的好處是可能保護系統被安裝漏洞侵襲的可能。缺點是需要超級用戶權限。另外對符號鏈接文件,將會排除在外。                也就是說,你在 rsync服務器上,如果有符號鏈接,你在備份服務器上運行客戶端的同步數據時,只會把符號鏈接名同步下來,並不會同步符號鏈接的內容;這個需要自己來嘗試

  read only = yes 

  注:read only 是只讀選擇,也就是說,不讓客戶端上傳文件到服務器上。還有一個 write only選項,自己嘗試是做什么用的吧;

  hosts allow=192.168.1.0/255.255.255.0  10.0.1.0/255.255.255.0 

  注:在您可以指定單個IP,也可以指定整個網段,能提高安全性。格式是ip 與ip 之間、ip和網段之間、網段和網段之間要用空格隔開

  pid file = /var/run/rsyncd.pid   注:告訴進程寫到 /var/run/rsyncd.pid 文件中
  port = 873  注:指定運行端口,默認是873,您可以自己指定;
  address = 192.168.18.211  注:指定服務器IP地址

  max connections = 5   注:客戶端最多連接數

  motd file = /etc/rsyncd/rsyncd.motd

  注:motd file 是定義服務器信息的,要自己寫 rsyncd.motd 文件內容。當用戶登錄時會看到這個信息。比如我寫的是:

  log file = /var/log/rsync.log    注:rsync 服務器的日志

 

2、模塊定義

  模塊定義什么呢?主要是定義服務器哪個目錄要被同步。每個模塊都要以[name]形式。這個名字就是在rsync 客戶端看到的名字,其實有點象Samba服務器提供的共享名。而服務器真正同步的數據是通過path         指定的。我們可以根據自己的需要,來指定多個模塊。每個模塊要指定認證用戶,密碼文件、但排除並不是必須的

 下面是前面配置文件模塊的例子:
[rhel4home] #模塊它為我們提供了一個鏈接的名字,在本模塊中鏈接到了/home目錄;要用[name] 形式   path = /home #指定文件目錄所在位置,這是必須指定的 
  auth users = root   #認證用戶是root ,是必須在服務器上存在的用戶
  list=yes   #list 意思是把rsync 服務器上提供同步數據的目錄在服務器上模塊是否顯示列出來。默認是yes 。如果你不想列出來,就no ;如果是no是比較安全的,至少別人不知道你的服務器上提供了哪些目錄。你自己知道就行了;
  ignore errors  #忽略IO錯誤
  secrets file = /etc/rsyncd.secrets   #密碼存在哪個文件
  comment = linuxsir home  data  #注釋可以自己定義
  exclude = beinan/ samba/  #exclude是排除的意思,也就是說,要把/home目錄下的easylife和samba排除在外; easylife/和samba/目錄之間有空格分開

五、防火牆的設置

  Linux 防火牆是用iptables,所以我們至少在服務器端要讓你所定義的rsync 服務器端口通過,客戶端上也應該讓通過。

iptables -A INPUT -p tcp -m state --state NEW  -m tcp --dport 873 -j ACCEPT iptables -L  #查看一下防火牆是不是打開了 873端口

  如果你不太懂防火牆的配置,可以先service iptables stop 將防火牆關掉。當然在生產環境這是很危險的,做測試就無所謂啦!

六、rsync語法詳解

  在配置完rsync服務器后,就可以從客戶端發出rsync命令來實現各種同步的操作。rsync有很多功能選項,下面就對介紹一下常用的選項:

  rsync的命令格式可以為:

  1. rsync [OPTION]... SRC [SRC]... [USER@]HOST:DEST 

  2. rsync [OPTION]... [USER@]HOST:SRC DEST 

  3. rsync [OPTION]... SRC [SRC]... DEST 

  4. rsync [OPTION]... [USER@]HOST::SRC [DEST] 

  5. rsync [OPTION]... SRC [SRC]... [USER@]HOST::DEST 

  6. rsync [OPTION]... rsync://[USER@]HOST[:PORT]/SRC [DEST]

  rsync有六種不同的工作模式:

  1. 拷貝本地文件;當SRC和DES路徑信息都不包含有單個冒號":"分隔符時就啟動這種工作模式。

  2.使用一個遠程shell程序(如rsh、ssh)來實現將本地機器的內容拷貝到遠程機器。當DST路徑地址包含單個冒號":"分隔符時啟動該模式。

  3.使用一個遠程shell程序(如rsh、ssh)來實現將遠程機器的內容拷貝到本地機器。當SRC地址路徑包含單個冒號":"分隔符時啟動該模式。

  4. 從遠程rsync服務器中拷貝文件到本地機。當SRC路徑信息包含"::"分隔符時啟動該模式。

  5. 從本地機器拷貝文件到遠程rsync服務器中。當DST路徑信息包含"::"分隔符時啟動該模式。

  6. 列遠程機的文件列表。這類似於rsync傳輸,不過只要在命令中省略掉本地機信息即可。
  

  rsync中的參數

  -a 以archive模式操作、復制目錄、符號連接 相當於-rlptgoD

  -r 是遞歸 

  -l 是鏈接文件,意思是拷貝鏈接文件;-p 表示保持文件原有權限;-t 保持文件原有時間;-g 保持文件原有用戶組;-o 保持文件原有屬主;-D 相當於塊設備文件;

  -z 傳輸時壓縮;

  -P 傳輸進度;

  -v 傳輸時的進度等信息,和-P有點關系,自己試試。可以看文檔;

  -e ssh的參數建立起加密的連接。

  -u只進行更新,防止本地新文件被重寫,注意兩者機器的時鍾的同時

  --progress 是指顯示出詳細的進度情況

  --delete 是指如果服務器端刪除了這一文件,那么客戶端也相應把文件刪除,保持真正的一致

  --password-file=/password/path/file來指定密碼文件,這樣就可以在腳本中使用而無需交互式地輸入驗證密碼了,這里需要注意的是這份密碼文件權限屬性要設得只有屬主可讀。

七、rsync錯誤分析

我們都是通過錯誤日志查看,在/etc/log/rsyncd.log里面,大家可以用記事本打開查看。

注意windows下面我們需要給SvcwRsync用戶,管理同步目錄的所有權限,基本上這樣就可以了

問題一: 
@ERROR: chroot failed 
rsync error: error starting client-server protocol (code 5) at main.c(1522) [receiver=3.0.3] 
原因: 
服務器端的目錄不存在或無權限,創建目錄並修正權限可解決問題。 

問題二: 
@ERROR: auth failed on module tee 
rsync error: error starting client-server protocol (code 5) at main.c(1522) [receiver=3.0.3] 
原因: 
服務器端該模塊(tee)需要驗證用戶名密碼,但客戶端沒有提供正確的用戶名密碼,認證失敗。 
提供正確的用戶名密碼解決此問題。 

問題三: 
@ERROR: Unknown module ‘tee_nonexists' 
rsync error: error starting client-server protocol (code 5) at main.c(1522) [receiver=3.0.3] 
原因: 
服務器不存在指定模塊。提供正確的模塊名或在服務器端修改成你要的模塊以解決問題。 

問題1: 
在client上遇到問題: 
rsync -auzv --progress --password-file=/etc/rsync.pas root@192.168.133.128::backup /home/ 
rsync: could not open password file "/etc/rsync.pas": No such file or directory (2) 
Password: 
@ERROR: auth failed on module backup 
rsync error: error starting client-server protocol (code 5) at main.c(1506) [Receiver=3.0.7] 
遇到這個問題:client端沒有設置/etc/rsync.pas這個文件,而在使用rsync命令的時候,加了這個參數-- 
password-file=/etc/rsync.pas 

問題2: 
rsync -auzv --progress --password-file=/etc/rsync.pas root@192.168.133.128::backup /home/ 
@ERROR: auth failed on module backup 
rsync error: error starting client-server protocol (code 5) at main.c(1506) [Receiver=3.0.7] 
遇到這個問題:client端已經設置/etc/rsync.pas這個文件,里面也設置了密碼111111,和服務器一致,但是 
服務器段設置有錯誤,服務器端應該設置/etc/rsync.pas ,里面內容root:111111 ,這里登陸名不可缺少 

問題3: 
rsync -auzv --progress --password-file=/etc/rsync.pas root@192.168.133.128::backup /home/ 
@ERROR: chdir failed 
rsync error: error starting client-server protocol (code 5) at main.c(1506) [Receiver=3.0.7] 
遇到這個問題,是因為服務器端的/home/backup 其中backup這個目錄並沒有設置,所以提示:chdir failed 

問題4: 
rsync: write failed on "/home/backup2010/wensong": No space left on device (28) 
rsync error: error in file IO (code 11) at receiver.c(302) [receiver=3.0.7] 
rsync: connection unexpectedly closed (2721 bytes received so far) [generator] 
rsync error: error in rsync protocol data stream (code 12) at io.c(601) [generator=3.0.7] 
磁盤空間不夠,所以無法操作。 
可以通過df /home/backup2010 來查看可用空間和已用空間 

問題5:網絡收集問題 
1、權限問題 
類似如下的提示:rsync: opendir "/kexue" (in dtsChannel) failed: Permission denied (13)注意查看同步的目錄權限是否為755 


2、time out 
rsync: failed to connect to 203.100.192.66: Connection timed out (110) 
rsync error: error in socket IO (code 10) at clientserver.c(124) [receiver=3.0.5] 
檢查服務器的端口netstat –tunlp,遠程telnet測試。 
可能因為客戶端或者服務端的防火牆開啟 導致無法通信,可以設置規則放行 rsync(873端口) 或者直接關閉防火牆。 

還有一種在同步過程中可能會提示沒有權限 (將同步目錄加上SvcwRsync全部權限即可,更簡單的方法就是將SvcwRsync設為管理員即可)

3、服務未啟動 
rsync: failed to connect to 10.10.10.170: Connection refused (111) 
rsync error: error in socket IO (code 10) at clientserver.c(124) [receiver=3.0.5] 
啟動服務:rsync --daemon --config=/etc/rsyncd.conf 


4、磁盤空間滿 
rsync: recv_generator: mkdir "/teacherclubBackup/rsync……" failed: No space left on device (28) 
*** Skipping any contents from this failed directory *** 


5、Ctrl+C或者大量文件 
rsync error: received SIGINT, SIGTERM, or SIGHUP (code 20) at rsync.c(544) [receiver=3.0.5] 
rsync error: received SIGINT, SIGTERM, or SIGHUP (code 20) at rsync.c(544) [generator=3.0.5] 
說明:導致此問題多半是服務端服務沒有被正常啟動,到服務器上去查查服務是否有啟動,然后查看下 /var/run/rsync.pid 文件是否存在,最干脆的方法是殺死已經啟動了服務,然后再次啟動服務或者讓腳本加入系統啟動服務級別然后shutdown -r now服務器

6、xnetid啟動 
rsync: read error: Connection reset by peer (104) 
rsync error: error in rsync protocol data stream (code 12) at io.c(759) [receiver=3.0.5] 
查看rsync日志 
rsync: unable to open configuration file "/etc/rsyncd.conf": No such file or directory 
xnetid查找的配置文件位置默認是/etc下,根據具體情況創建軟鏈接。例如: 
ln -s /etc/rsyncd/rsyncd.conf /etc/rsyncd.conf 
或者更改指定默認的配置文件路徑,在/etc/xinetd.d/rsync配置文件中。 

我自己的解決方案是:查看 /etc/xinetd.d/rsync 中 server_args 的配置 ,應該是 --config=/etc/rsyncd.conf 這個路徑寫錯了

Rsync configure:
配置一:
ignore errors
說明:這個選項最好加上,否則再很多crontab的時候往往發生錯誤你也未可知,因為你不可能天天去看每時每刻去看log,不加上這個出現錯誤的幾率相對會很高,因為任何大點的項目和系統,磁盤IO都是一個瓶頸

Rsync error: 
錯誤一: 
@ERROR: auth failed on module xxxxx 
rsync: connection unexpectedly closed (90 bytes read so far) 
rsync error: error in rsync protocol data stream (code 12) at io.c(150) 
說明:這是因為密碼設置錯了,無法登入成功,檢查一下rsync.pwd,看客服是否匹配。還有服務器端沒啟動rsync 服務也會出現這種情況。

錯誤二: 
password file must not be other-accessible 
continuing without password file 
Password: 
說明:這是因為rsyncd.pwd rsyncd.sec的權限不對,應該設置為600。如:chmod 600 rsyncd.pwd

錯誤三: 
@ERROR: chroot failed 
rsync: connection unexpectedly closed (75 bytes read so far) 
rsync error: error in rsync protocol data stream (code 12) at io.c(150) 
說明:這是因為你在 rsync.conf 中設置的 path 路徑不存在,要新建目錄才能開啟同步

錯誤四: 
rsync: failed to connect to 218.107.243.2: No route to host (113) 
rsync error: error in socket IO (code 10) at clientserver.c(104) [receiver=2.6.9] 
說明:防火牆問題導致,這個最好先徹底關閉防火牆,排錯的基本法就是這樣,無論是S還是C,還有ignore errors選項問題也會導致

錯誤五:
@ERROR: access denied to www from unknown (192.168.1.123)
rsync: connection unexpectedly closed (0 bytes received so far) [receiver]
rsync error: error in rsync protocol data stream (code 12) at io.c(359)
說明:此問題很明顯,是配置選項host allow的問題,初學者喜歡一個允許段做成一個配置,然后模塊又是同一個,致使導致

錯誤六:
rsync error: received SIGINT, SIGTERM, or SIGHUP (code 20) at rsync.c(244) [generator=2.6.9]
rsync error: received SIGUSR1 (code 19) at main.c(1182) [receiver=2.6.9]
說明:導致此問題多半是服務端服務沒有被正常啟動,到服務器上去查查服務是否有啟動,然后查看下 /var/run/rsync.pid 文件是否存在,最干脆的方法是殺死已經啟動了服務,然后再次啟動服務或者讓腳本加入系統啟動服務級別然后shutdown -r now服務器

錯誤七:
rsync: read error: Connection reset by peer (104)
rsync error: error in rsync protocol data stream (code 12) at io.c(604) [sender=2.6.9]
說明:原數據目錄里沒有數據存在

 

本文經小作者 daicr 親身實踐,確實可行,同時感謝以下參考博文的博友們!

本文參考:https://www.linuxidc.com/Linux/2014-05/101084.htm

       https://www.cnblogs.com/tomato0906/articles/7989222.html

       http://www.jb51.net/article/31920.htm


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM