備份方式
-
cp 本機復制
-
scp 遠程復制
-
推 (本地上傳到遠程服務器)
-
格式
-
scp 1.txt root@ip:[路徑]
-
例
-
[root@m01 ~]# scp 1.txt root@172.16.1.41:/opt/
-
拉 (遠程服務器文件下載到本地)
-
格式
-
scp root@ip:[路徑] ./
-
例
-
[root@m01 ~]# scp root@172.16.1.41:/opt/2.txt
-
rsync 遠程復制/備份
-
支持 增量復制
------
rsync
------
概要
1 介紹
2 特性
3 應用場景(備份方式)
4 傳輸方式
5 傳輸模式
6 參數
7 rsync守護進程模式(目的:實現實時備份)
---服務端
---客戶端
---實時同步
詳細
1 介紹
rsync英文稱為remote synchronizetion，從軟件的名稱就可以看出來，rsync具有可使本地和遠程兩台主機之間的數據快速復制同步鏡像、遠程備份的功能，這個功能類似於ssh帶的scp命令，但是又優於scp命令的功能，scp每次都是全量拷貝，而rsync可以增量拷貝。當然，rsync還可以在本地主機的不同分區或目錄之間全量及增量的復制數據，這又類似cp命令。但是同樣也優於cp命令，cp每次都是全量拷貝，而rsync可以增量拷貝。
rsync官方地址：
https://rsync.samba.org/
rsync監聽端口：873
rsync運行模式：C/S client/server
rsync簡稱叫做遠程同步，可以實現不同主機之間的數據同步，方式全量和增量
2 特性
支持拷貝特殊文件，如連接文件、設備等
可以有排除指定文件或目錄同步的功能，相當於打包命令tar的排除功能
可以做到保持原文件或目錄的權限、時間、軟硬鏈接、屬主、組等所有屬性均不改變 –p
可以實現增量同步，既只同步發生變化的數據，因此數據傳輸效率很高（tar-N）
可以使用rcp、rsh、ssh等方式來配合傳輸文件（rsync本身不對數據加密）
可以通過socket（進程方式）傳輸文件和數據（服務端和客戶端）*****
支持匿名的活認證（無需系統用戶）的進程模式傳輸，可以實現方便安全的進行數據備份和鏡像
3 應用場景(備份方式)
-
全量備份
-
每次都是從頭開始復制
-
增量備份
-
接續上次復制
4 傳輸方式
-
push
-
數據從本地(客戶端)推送至服務端
-
pull
-
數據從服務端拉取到本地(客戶端)
5 傳輸模式
-
本地方式(類似cp)
-
遠程方式
-
類似於scp，又不同於scp, scp只支持全量備份，rsync支持增量備份和差異備份
-
守護進程方式（客戶端和服務端）
-
借助inotify這個軟件來實現實時同步
6 rsync參數使用
上傳文件
格式:
sync -azvP 本地文件路徑 root@遠程PC的IP 冒號 遠程PC文件路徑
下載文件
格式:
sync -azvP root@遠程PC的IP 冒號 遠程PC文件路徑 本地文件路徑
詳細
-
-a #歸檔模式傳輸, 等於-tropgDl -t -r -o -p -g -D -l
-
-v #詳細模式輸出, 打印速率, 文件數量等
-
-P #顯示同步的過程及傳輸時的進度等信息
-
-z #傳輸時進行壓縮以提高效率
-
其他(1)
-
-r #遞歸傳輸目錄及子目錄，即目錄下得所有目錄都同樣傳輸
-
-t #保持文件時間信息
-
-o #保持文件屬主信息
-
-g #保持文件屬組信息
-
-p #保持文件權限
-
-l #保留軟連接
-
-D #保持設備文件信息
-
-L #保留軟連接指向的目標文件
-
-e #使用的信道協議,指定替代rsh的shell程序(很少用)
-
其他
-
--append # 指定文件接着上次傳輸中斷處繼續傳輸
-
[root@m01 ~]# rsync -azvP --append 2.txt root@172.16.1.41:/root/test
-
--append-verify # 使用參數續傳（在斷點續傳之后，驗證一下文件: 如果文件有修改，從頭開始傳; 沒有,從斷點處傳輸）
-
--exclude=PATTERN # 指定排除不需要傳輸的文件
-
[root@m01 ~]# rsync -avzP --append-verify --exclude=2.txt ./* root@172.16.1.41:/opt/
-
--exclude-from=file # 按照文件指定內容排除
-
[root@m01 ~]# rsync -avzP --append-verify --exclude-from=/tmp/exclude.txt ./* root@172.16.1.41:/opt/
-
--bwlimit=100 # 限速傳輸（單位：MB）
-
[root@m01 ~]# rsync -avzP --append-verify --bwlimit=10 ./* root@172.16.1.41:/opt/
-
--delete # 讓目標目錄和源目錄數據保持一致
-
--password-file=xxx # 使用密碼文件
-
--port # 指定端口傳輸
7 rsync守護進程模式
-
目的:實現實時備份
step1---服務端
1-1 # 安裝rsync軟件
[root@backup ~]# yum install -y rsync
1-2 # 修改配置文件
[root@backup opt]# vim /etc/rsyncd.conf
注意:編輯完再進去檢查下,[backup]后邊行確認無注釋的#
uid = rsync
gid = rsync
port = 873
fake super = yes
use chroot = no
max connections = 200
timeout = 600
ignore errors
read only = false
list = false
auth users = rsync_backup
secrets file = /etc/rsync.passwd
log file = /var/log/rsyncd.log
#####################################
[backup]
comment = welcome to backup!
path =/backup
[linux]
comment = welcome to linux!
path=/tmp/linux
配置詳解
1-3 # 創建系統用戶(目的:啟動rsync軟件需要一個用戶; 另啟動該軟件隨操作系統)
[root@backup opt]# groupadd rsync -g 666
[root@backup opt]# useradd rsync -u 666 -g 666 -M -s /sbin/nologin -r
-M 指定創建系統用戶; /nologin 不需要登陸
1-4 # 創建密碼文件
[root@backup opt]# echo "rsync_backup:123456" > /etc/rsync.passwd
格式:
echo "虛擬用戶名(配置文件里):新設定密碼" 密碼路徑(配置文件里)
1-5 # "密碼文件"授權（必須授權為600）
[root@backup opt]# chmod 600 /etc/rsync.passwd
1-6 # 創建備份目錄
[root@backup opt]# mkdir /backup
[root@backup opt]# mkdir /tmp/linux
1-7 # 目錄授權
[root@backup opt]# chown rsync.rsync /backup/
[root@backup opt]# chown rsync.rsync /tmp/linux/
創建的目錄---默認屬主數組是root,啟動的應用程序是rsync,這些目錄沒有權限,所以需要授權
1-8 # 關閉防火牆和selinux
[root@backup opt]# systemctl disable --now firewalld
[root@backup opt]# setenforce 0
1-9 # 啟動rsyncd服務
[root@backup opt]# systemctl start rsyncd
演示
補充:
-
開機自啟動
-
格式
-
systemctl enable --now 軟件名
step2 ---在客戶端測試
-
在客戶端上傳資料到"服務端rsync"
-
方式: 3中
方法一：自己輸入密碼
[root@m01 ~]# rsync -avzP ./* rsync_backup@172.16.1.41::backup
-
rsync_backup ： 虛擬用戶，只在數據傳輸時使用
-
172.16.1.41 ： backup服務端的IP
-
backup ： 模塊名稱(注意語句中前邊是兩個冒號)
方法二：設置密碼文件，運行時讀取(常用此方式)
-
編寫密碼文件
-
[root@backup opt]# echo "123456" > /etc/rsync.passwd
-
密碼"1233456"就是 服務端rsync軟件的的配置文件中設定的密碼,要一致
-
授權"密碼文件"
-
[root@m01 ~]# chmod 600 /etc/rsync.passwd
-
上傳備份
-
[root@m01 ~]# rsync -avzP --password-file=/etc/rsync.passwd ./* rsync_backup@172.16.1.41::linux
方法三：添加環境變量(很少用)
-
定義環境變量
-
export RSYNC_PASSWORD=123456
-
上傳備份
-
[root@m01 ~]# rsync -avzP ./* rsync_backup@172.16.1.41::linux
step3---實時同步
rsync是不支持實時同步的，通常我們借助於inotify這個軟件來實時監控文件變化，一旦inotify監控到文件變，則立即調用rsync進行同步
1、安裝inotify(裝在客戶端)
# yum -y install inotify-tools
2、實時同步(在客戶端輸入命令語句)
-
用到"實時監控軟件"及語句
-
注意以下備份語句中密碼輸入方式為"將密碼寫入文件"(step2的方式2)
[root@m01 ~]# /usr/bin/inotifywait -mrq --format '%Xe %w %f' -e create,modify,delete,attrib,close_write /root | while read line;do
cd /root
rsync -avzP --delete --password-file=/etc/rsync.passwd ./* rsync_backup@172.16.1.41::backup
done
inotify參數介紹
-
-m 持續監控
-
-r 遞歸
-
-q 靜默，僅打印時間信息
-
--timefmt 指定輸出時間格式
-
--format 指定事件輸出格式
-
%Xe 事件
-
%w 目錄
-
%f 文件
-
-e 指定監控的事件
-
access 訪問
-
modify 內容修改
-
attrib 屬性修改
-
close_write 修改真實文件內容
-
open 打開
-
create 創建
-
delete 刪除
-
umount 卸載
>>>監控語句---實時監控(在客戶端)
[root@m01 ~]# /usr/bin/inotifywait -mrq --format '%Xe %w %f' -e create,modify,delete,attrib,close_write /root
---補充:
創建固定大小文件
-
dd if=/dev/zero of=3.txt bs=100M count=10
修改 屬主屬組
