Linux笔记 rsync

Rsync介绍

1、什么是rsync

rsync是一款开源，快速，多功能的可实现增量的本地或远程的数据镜像同步备份的优秀工具。适用于多个平台。从软件名称能够看出来是远程同步的意思（remote sync）。可以使本地主机不一样分区或目录之间及本地和远程两台主机之间的数据快速同步镜像，远程备份等功能。

   在同步备份时，默认状况下，rsync经过其独特的“quick check”算法，仅同步大小或者最后修改时间发生变化的文件或目录（也可根据权限，属主等变化同步，须要制定参数）。甚至是只同步一个文件里变化的内容部分，因此能够实现快速的同步数据的功能。

提示：传统的cp，scp工具拷贝每次均为完整拷贝，而rsync除了完整拷贝，还具有增量拷贝的功能，所以今后性能及效率上更胜一筹。

Rsync的特性以下：

1）支持拷贝特殊文件如连接，设备等

2）能够有排除指定文件或目录同步的功能，至关于打包命令tar

3）能够保持原来文件或目录的权限，时间，软硬连接等全部属性均不改变。

4）可实现增量同步，即只同步发生变化的数据，所以数据传输效率更高

5）可使用rcp，rsh，ssh等方式来配合传输文件，也能够经过直接的socker连接

6）支持匿名的或认证的进程模式传输，方便进行数据备份及镜像。

 

[1]核心算法介绍：

假定在名为α和β的两台计算机之间同步类似的文件 A 与 B ，其中α对文件 A 拥有访问权，β对文件 B 拥有访问权。而且假定主机α与β之间的网络带宽很小。那么 rsync 算法将经过下面的五个步骤来完成：

1. β将文件 B 分割成一组不重叠的固定大小为 S 字节的数据块。最后一块可能会比 S 小。

2. β对每个分割好的数据块执行两种校验：一种是 32 位的滚动弱校验，另外一种是 128 位的 MD4 强校验。

3. β将这些校验结果发给α。

4. α经过搜索文件 A 的全部大小为 S 的数据块 ( 偏移量能够任选，不必定非要是 S 的倍数 ) ，来寻找与文件 B 的某一块有着相同的弱校验码和强校验码的数据块。这项工做能够借助滚动校验的特性很快完成。

5. α发给β一串指令来生成文件 A 在β上的备份。这里的每一条指令要么是对文件 B 经拥有某一个数据块而不须重传的证实，要么是一个数据块，这个数据块确定是没有与文件 B 的任何一个数据块匹配上的。

-------------------------------------小结------------------------------------------------

rsync就是会同步咱们指定的两端目录之间的数据，这个数据能够是特殊的数据。同步以前就先进行两端的数据的比对，只会同步二者之间不一样的部分，并保留文件本来的属性。而且支持匿名的方式进行同步传输。因此rsync在备份，同步上就会较为快速。

-----------------------------------------------------------------------------------------

2、软件安装

http://rsync.samba.org/   rsync的官方网站

1）编译安装

很简单那就直接解压

tar  zxf rsync-3.1.0.tar.gz 

cd rsync-3.1.0

./configure 

make 

make install 

提示：服务器和客户端均要安装rsync

3、服务器端rsync部署

rsync的启动

一、 守护进程启动rsync
[root@www rsync-2.4.6]# /usr/local/bin/rsync --daemon
便可启动。rsync默认服务端口为873，服务器在该端口接收客户的匿名或者认证方式的请求。
二、开机启动
2.1）inetd.conf
编辑/etc/services，加入行rsync 873/tcp，指定rsync的服务端口是873。编加/etc/inetd.conf，加入rsync stream tcp nowait root /bin/rsync rsync --daemon

注：对于xinetd，设置方法相似。
2.2）加入rc.local
将启动命令加入rc.local中：/usr/local/bin/rsync --daemon

 

rsync的两种工做方式:

1) 传输本地文件

2）传输服服务端和客户端之间的数据

 

传输本地文件

具体的rsync命令参数后续会讲

[root@CT5_6-32-220-NFS01tmp]# rsync -avz /tmp/dir01/   /tmp/dir02/

building file list ... done

./

test01

sent 105 bytes received 48 bytes  306.00bytes/sec

total size is 0 speedup is 0.00

[root@CT5_6-32-220-NFS01 tmp]# tree

.

|-- dir01

|   `--test01

|-- dir02

|   `--test01

##能够看到已经成功的拷贝了。而且要注意/dir01/表示目录下的全部内容 /dir01表示的目录自己

次例子是拷贝目录下的内容因此要加上/dir01/若是是要将/dir01整个目录拷贝到/dir02下，那么就要写/dir01  --->注意后面没有/

[root@CT5_6-32-220-NFS01 tmp]# rsync -avz /tmp/dir01   /tmp/dir02/##这样拷贝的是目录自己

building file list ... done

dir01/

dir01/test01

sent 111 bytes received 48 bytes  318.00bytes/sec

total size is 0 speedup is 0.00

[root@CT5_6-32-220-NFS01 tmp]# tree

|-- dir01

|   `--test01

|-- dir02

|   |-- dir01

|   |   `-- test01

|   `--test01

 

服务端和客户端传输

一、服务端配置文件

   rsync服务器的配置文件为/etc/rsyncd.conf，其控制认证、访问、日志记录等等。
该文件是由一个或多个模块结构组成。一个模块定义以方括弧中的模块名开始，直到下一个模块定义开始或者文件结束，模块中包含格式为name = value的参数定义。

每一个模块其实就对应须要备份的一个目录树，比方说在咱们的实例环境中，有三个目录树须要备份：/www/、 /home/web_user1/和/home/web_user2/，那么就须要在配置文件中定义三个模块，分别对应三个目录树。配置文件是行为单位的，也就是每一个新行都表示一个新的注释、模块定义或者参数赋值。以#开始的行表示注释，以"\"结束的行表示下面一行是该行的继续。参数赋值中等号后多是一个大小写不敏感的字符串、一个以trure/false表示的布尔值。

参数说明:

全局参数：在文件中[modlue模块名]以前的全部参数都是全局参数，固然也能够在全局参数部分定义模块参数，这时候该参数的值就是全部模块的默认值。

全局参数	描述
motd file	motd file
log file	指定rsync的日志文件，而不将日志发送给syslog。
pid file	指定rsync的pid文件。
syslog facility	指定rsync发送日志消息给syslog时的消息级别，常见的消息级别是：uth, authpriv, cron, daemon, ftp, kern, lpr, mail, news, security,  sys-log, user, uucp, local0, local1, local2, local3,local4, local5, local6和local7。默认值是daemon。

模块参数:在全局参数以后就须要定义一个或多个模块了，模块中能够定义如下参数：模块以[模块名]开始，直到另外一个模块的开始结束

模块参数	描述
comment	给模块指定一个描述，该描述连同模块名在客户链接获得模块列表时显示给客户。默认没有描述定义。
path	指定该模块的供备份的目录树路径，该参数是必须指定的
use chroot	若是"use  chroot"指定为true，那么rsync在传输文件之前首先chroot到path参数所指定的目录下。这样作的缘由是实现额外的安全防御，可是缺点是须要以roots权限，而且不能备份指向外部的符号链接所指向的目录文件。默认状况下chroot值为true。推荐：?
max connections	指定该模块的最大并发链接数量以保护服务器，超过限制的链接请求将被告知随后再试。默认值是0，也就是没有限制。
lock file	指定支持max connections参数的锁文件，默认值是/var/run/rsyncd.lock
read only	该选项设定是否容许客户上载文件。若是为true那么任何上载请求都会失败，若是为false而且服务器目录读写权限容许那么上载是容许的。默认值为true。
list	该选项设定当客户请求可使用的模块列表时，该模块是否应该被列出。若是设置该选项为false，能够建立隐藏的模块。默认值是true。
uid	该选项指定当该模块传输文件时守护进程应该具备的uid，配合gid选项使用能够肯定哪些能够访问怎么样的文件权限，默认值是"nobody"。
gid	该选项指定当该模块传输文件时守护进程应该具备的gid。默认值为"nobody"。 就是说当同步到这个模块的时候，rsync守护进行要使用什么样的UID和GID权限来读取本地文件。（疑问：不懂是不是这样理解）
exlude	用来指定多个由空格隔开的多个模式列表，并将其添加到exclude列表中。这等同于在客户端命令中使用--exclude来指定模式，不过配置文件中指定的exlude模式不会传递给客户端，而仅仅应用于服务器。一个模块只能指定一个exlude选项，可是能够在模式前面使用"-"和"+"来指定是 exclude仍是include。 可是须要注意的一点是该选项有必定的安全性问题，客户颇有可能绕过exlude列表，若是但愿确保特定的文件不能被访问，那就最好结合uid/gid选项一块儿使用。
include	用来指定多个由空格隔开的多个rsync并应该exlude的模式列表。这等同于在客户端命令中使用--include来指定模式，结合  include和 exlude能够定义复杂的exlude/include规则。一个模块只能指定一个include选项，可是能够在模式前面使用"-"和"+"来指定是 exclude仍是include。
auth users	该选项指定由空格或逗号分隔的用户名列表，只有这些用户才容许链接该模块。这里的用户和系统用户没有任何关系。若是"auth users"被设置，那么客户端发出对该模块的链接请求之后会被rsync请求challenged进行验证身份这里使用的 challenge/response认证协议。用户的名和密码以明文方式存放在"secrets file"选项指定的文件中。默认状况下无需密码就能够链接模块(也就是匿名方式)。
secrets file	该选项指定一个包含定义用户名:密码对的文件。只有在"auth  users"被定义时，该文件才有做用。文件每行包含一个username:passwd对。通常来讲密码最好不要超过8个字符。没有默认的 secures file名，须要限式指定一个。(例如：/etc/rsyncd.secrets)
hosts allow	该选项指定哪些IP的客户容许链接该模块。客户模式定义能够是如下形式：  192.168.1.1 指定只有某个IP地址 192.168.1.0/24  指定某个网络的客户端 Backup.linux.com  指定某个主机名才能访问 默认是容许全部主机链接。
hosts deny	指定不容许链接rsync服务器的机器，可使用hosts  allow的定义方式来进行定义。默认是没有hosts  deny定义
ignore errors	指定rsyncd在判断是否运行传输时的删除操做时忽略server上的IP错误，通常来讲rsync在出现IO错误时将将跳过--delete操做，以防止由于暂时的资源不足或其它IO错误致使的严重问题。
ignore nonreadable	指定rysnc服务器彻底忽略那些用户没有访问权限的文件。这对于在须要备份的目录中有些文件是不该该被备份者获得的状况是有意义的。
transfer logging	使rsync服务器使用ftp格式的文件来记录下载和上载操做在本身单独的日志中。
log format	经过该选项用户在使用transfer logging能够本身定制日志文件的字段。其格式是一个包含格式定义符的字符串，可使用的格式定义符以下所示： 默认log格式为："%o %h [%a]  %m (%u) %f %l"，通常来讲,在每行的头上会添加"%t [%p] "。在源代码中同时发布有一个叫rsyncstats的perl脚本程序来统计这种格式的日志文件。 %h 远程主机名%a 远程IP地址%m 模块名%t 当前时间%f 文件名 %l 文件长度字符数
timeout	经过该选项能够覆盖客户指定的IP超时时间。经过该选项能够确保rsync服务器不会永远等待一个崩溃的客户。超时单位为秒钟，0表示没有超时定义，这也是默认值。对于匿名rsync服务器来讲，一个理想的数字是600。
dont compress	用来指定那些不进行压缩处理再传输的文件，默认值是  *.gz *.tgz *.zip *.z *.rpm *.deb *.iso *.bz2  *.tbz 由于这些文件已经通过压缩咯，默认不用修改。

服务器配置实例分析
有两台服务器：A和B。其中A是主web服务器，具备域名www.atong.com(192.168.1.1)，B服务器是备份机，其域名为back.atong.com(192.168.1.2)。其中A的web内容存放在如下几个地方： /www/和 /home/web_user1/和/home/web_user2/。咱们须要在备份机B上创建对这几个目录内容的备份。

#vi /etc/rsyncd.conf 编辑服务端的配置文件。

#配置文件内容

uid = nobody
gid = nobody
use chroot = no
max connections = 4
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
log file = /var/log/rsyncd.log
[www]
path = /www/
ignore errors
read only = true
list = false
hosts allow = 192.168.1.2
hosts deny = 0.0.0.0/32    #拒绝任何主机，只有hosts allow的主机
auth users = rsync
secrets file = /etc/rsync.pas

[web_user1]
path = /home/web_user1/
ignore errors
read only = true            #客户端不能上传资料
list = false
hosts allow = 192.168.1.2
hosts deny = 0.0.0.0/32
uid = web_user1             #同步次模块时，shi是用web_user1这个用户来读取path下的文件。
gid = web_user1
auth users = rsync
secrets file = /etc/rsync.pas

[web_user2]
path = /home/web_user2/
ignore errors
read only = true
list = false
hosts allow = 192.168.1.2
hosts deny = 0.0.0.0/32
uid = web_user2
gid = web_user2
auth users = rsync
secrets file = /etc/rsync.pas

这里定义有三个模块，分别对应于三个须要备份的目录树。这里只容许192.168.1.2备份本机的数据，而且须要认证。三个模块受权的备份用户都为rsync，而且用户信息保存在文件/etc/rsync.pas中，其内容以下：rsync:123456

而且该文件只能是root用户可读写的，不然rsyncd启动时会出错。这些文件配置完毕之后，就须要在A服务器上启动rsyncd服务器：/usr/bin/rsync --daemon

注意： 密码文件的权限设置为600

 

客户端操做

在对rsync服务器配置结束之后，下一步就须要在客户端发出rsync命令来实现将服务器端的文件备份到客户端来。rsync是一个功能很是强大的工具，其命令也有不少功能特点选项，咱们下面就对它的选项一一进行分析说明。首先，rsync的命令格式能够为：
1）rsync [OPTION]... SRC [SRC]... [USER@]HOST:DEST   推送（由于SRC是本地)
2）rsync [OPTION]... [USER@]HOST:SRC DEST            拉取 (由于SRC是服务端）
3）rsync [OPTION]... SRC [SRC]... DEST      拷贝本地文件
4）rsync [OPTION]... [USER@]HOST::SRC [DEST]
5）rsync [OPTION]... SRC [SRC]... [USER@]HOST::DEST
6)rsync [OPTION]... rsync://[USER@]HOST[:PORT]/SRC[DEST]

SRC:标示源文件（从哪来拷）   DES：目标文件（拷到哪里）
rsync命令有六种格式：

第1个命令格式：是将本地的内容推送到服务器端。实例：rsync  /tmp   rsync@192.168.1.1:www 

第2个命令格式：是将服务器的内容拉取到本地端。实例:rsync rsync@192.168.1.1:www    /tmp

[对照一下上面的命令格式，通常是有USER@HOST:就表示是服务器端，而没有知识SRC或DEST就表示是客户端。怎么分清楚是拉取仍是推送，要看服务端是SRC仍是DEST，若是是SRC就表示从服务端拷，就是拉取格式如USER@HOST:SRC。若是是DEST（拷到哪里）就表示推送，拷到服务端USER@HOST:DEST]

第4个和第5个命令同第一、2之间的区别就在于服务端（USER@HSOT)后面是跟上一个： 仍是两个：：1g个：表示会在服务器端启用以个shell来执行这个命令。而：：表示会以deamon模式来执行。

 

 

rsync命令同步参数：

先了解下rsync的同步参数选项，先经过本地同步的方式来验证rsync的同步参数。

-v      :详细模式输出，传输时的进度等信息

-z      :传输时进行压缩以提升效率—compress-level=num可按级别压缩

-r      :对子目录以递归模式，即目录下的全部目录都一样传输。

-t      :保持文件的时间信息—time

-o      ：保持文件属主信息owner

-p      ：保持文件权限

-g      ：保持文件的属组信息

-P      :--progress 显示同步的过程及传输时的进度等信息

-a      ：归档模式，表示以地柜模式传输文件，并保持文件全部属性至关于-rtopgdl

-e      ：使用的信道协议，指定替代rsh的shell程序。例如：ssh

-D      :保持设备文件信息

-l      ：--links 保留软链接

--progress  :显示备份过程

--delete    :删除那些DST中SRC没有的文件

--exclude=PATTERN 　指定排除不须要传输的文件模式

-u, --update 仅仅进行更新，也就是跳过全部已经存在于DST，而且文件时间晚于要备份的文件。(不覆盖更新的文件)

-b, --backup 建立备份，也就是对于目的已经存在有一样的文件名时，将老的文件从新命名为~filename。

-suffix=SUFFIX 定义备份文件前缀

-stats 给出某些文件的传输状态

-R, --relative 使用相对路径信息  如：rsync foo/bar/foo.c remote:/tmp/   则在/tmp目录下建立foo.c文件，而若是使用-R参数：rsync -R foo/bar/foo.c remote:/tmp/     则会建立文件/tmp/foo/bar/foo.c，也就是会保持彻底路径信息。

--config=FILE 指定其余的配置文件，不使用默认的rsyncd.conf文件

--port=PORT 指定其余的rsync服务端口

通常就使用  -avz来进行传输,若是放入脚本中能够吧-v和-P去掉。

客户端命令格式实例：

1.2 从服务器上下载文件

rsync -avz  --delete  rsycn@192.168.1.1::/tmp  /tmp --password-file=/etc/rsync.pas

从本地上传到服务器上去

rsync -avz --delete --progress   /tmp rsync@192.168.1.1::/tmp

 

参考实例1：

 

具体需求：在A-SERVER上以rsync守护进程的方式部署rsync服务，使得全部客户端主机，能够把本地的数据经过rsync的方式据备份到服务器A-SERVER上。也能够经过rsync将数据从A-SERVER抓取到客户端。

拓扑方向：C<---->A  A<--->B

服务器端

1）配置/etc/rsyncd.conf

Rsyncd.conf 默认是rsync服务的配置文件

uid = root     #此表示rsync以什么用户来读取本地的目。也就是以root用户来进行rsync指定目录的文件读取，写入权限。

gid = root

use chroot = no

max connections = 200  #最大链接数

timeout = 300

pid file = /var/run/rsyncd.pid

locak file =  /var/run/rsync.lock

log file =  /var/log/rsyncd.log  #日志文件

[atong]    #当咱们读取的时候，就须要使用到模块名

Path =  /tmp/    #指定备份的路径

Ignore  errors      #忽略错误

read  only = false   #不仅读

list = false         #不列出rsync目录文件

hosts  allow = 10.0.0.0/24

hosts  deny = 0.0.0.0/32

auth users = rsync_backup

secrets  file = /etc/rsync.password   #认证的密钥文件

man  rsyncd.conf查看配置的细节信息

注意：配置的path必定要存在，而且权限是容许uid和gid去进行读写才能够。有点相似nfs的本地文件权限，和nfs共享权限同样。

2）配置密码文件：文件格式为用户：密码而且里面的只能以这样的格式，而且是没有空格的。并且在配置文件中的log file 指定的存放路径，就是此密码文件的存放路径，且文件名要正确。密码文件的权限必须是600的权限，root root

3）启动rsync

#rsync –-daemon 表示让rsync以daemon的模式进行启动

#ps -ef | grep rsync  查看rsync进程是否已经启动

#netstat –lnt | grep 873   查看rsync是否已经启动，并检测端口状态

#lsof –I tcp:873  用来反查端口对应的是什么服务。

拓展：--daemon 表示以守护进程的方式启动

--address 绑定某个ip地址来提供服务，若是有多个ip地址的话

--config=file  更还配置文件路径，而不是默认的/etc/rsyncd.conf

--port=PORT 更改其余端口提供服务器，而不是默认的873端口

以上的几个参数为了解内容，生产环境并不长经常使用

配置rsync开机启动

echo “/usr/bin/rsync --daemon”>>/etc/rc.local

重启rsync服务pkill rsync&&rsync -daemon

 

客户端部署

1）在一样的密码文件下添加用户的密码  600权限（文件不必定要和服务端的同样，但为了方便管理，建议同样的）

推送#rsync –avz –P  /tmp/atong rsync_back@192.168.1.1::atong

最后面的：：表示是以daemon模式，而且是oldboy模块。此模块的名称必须和配置文件中的同样。

#rsync–avz –P  /tmp/atong  rsync://rsync_back@192.168.1.1:/atong/ hosts

--password-file=/etc/rsync.password

此方式的推送，最后面的/atong/跟的并非模块名称，而是直接接上目录路径。[此目录是否是只可以接上，服务器上配置的同步目录]

实例：

[root@CT5_6-32-220-NFS01 data]# cat/etc/rsyncd.conf   

uid = root

gid = root

user chroot = no

max connections =200

timeout = 300

pid file =/var/run/rsyncd.pid

locake file =/var/run/rsync.lock

log file = /var/log/rsyncd.log

[tmp]

path=/tmp/

ignore errors 

read only = false

list = false

hosts allow = 192.168.40.0/22

hsots deny=0.0.0.0/32

authusers = rsync_back

secretsfile= /etc/rsync.password

[/data/rsync/]

path=/data/rsync/

read only = false

auth users = rsync_back

secrets file = /etc/rsync.password

###

root@CT5_6-32-220-NFS01 tmp]# mkdir /data   ##建立模块中使用到的目录

mkdir: cannot create directory `/data': File exists

[root@CT5_6-32-220-NFS01 tmp]# cd /data

[root@CT5_6-32-220-NFS01 data]# echo"rsync_back:123456" >> /etc/rsync.password

[root@CT5_6-32-220-NFS01 data]# chmod 600  /etc/rsync.password##注意密码文件的权限为600权限。

[root@CT5_6-32-220-NFS01 data]# rsync –daemon  启动

[root@CT5_6-32-220-NFS01 data]# netstat -lnt | grep873  ##查看系统中是否已经启动rsync

tcp       0      0 0.0.0.0:873                 0.0.0.0:*                   LISTEN  

###配置客户端：客户端中只须要存放用户的密码，而且权限为600便可###

[root@CT56-32-221-NFS02 dir01]# echo  "123456" >>/etc/rsync.password

[root@CT56-32-221-NFS02 dir01]# chmod 600/etc/rsync.password

第一种拉取方式：

[root@CT56-32-221-NFS02 tmp]# rsync -avz   rsync_back@192.168.41.220::tmp /tmp/  ##其中

[root@CT56-32-221-NFS02 tmp]# ll

total 20

drwxr-xr-x 84 root root 4096 Jun 20 10:28 2

drwxr-xr-x  3root root 4096 Jun 20 10:19 dir01

drwxr-xr-x  3root root 4096 Jun 20 09:43 dir02

drwxr-xr-x 84 root root 4096 Jun 19 05:25 etc

drwx------  2root root 4096 Jun 20 07:40 ssh-ZQBmZ29557

说明：若是是加上-delete进行推送，那么我指定的本地目录的内容有哪些，远端目录的内容也就只有哪些。如我本来指定/tmp/atong/ 和远端/atong/同样。后来又再建立了一个/delete目录且为空，那么我再推送/tmp/delete/和远端/atong/目录，那么远端原来有的全部内容都会被删除掉，由于此时的/delete/目录有啥，远端也就有啥。

 

一些示例脚本
这里这些脚本都是rsync网站上的例子：

一、每隔七天将数据往中心服务器作增量备份

#!/bin/sh
# This script does personal backups to a rsyncbackup server. You will end up
# with a 7 day rotating incremental backup. Theincrementals will go
# into subdirectories named after the day of theweek, and the current
# full backup goes into a directory called"current"
# tridge@linuxcare.com

# directory to backup
BDIR=/home/$USER

# excludes file - this contains a wildcard patternper line of files to exclude
EXCLUDES=$HOME/cron/excludes

# the name of the backup machine
BSERVER=owl

# your password on the backup server
export RSYNC_PASSWORD=XXXXXX


########################################################################
BACKUPDIR=`date +%A`
OPTS="--force --ignore-errors--delete-excluded --exclude-from=$EXCLUDES
--delete --backup --backup-dir=/$BACKUPDIR -a"
export PATH=$PATH:/bin:/usr/bin:/usr/local/bin
# the following line clears the last weeks incrementaldirectory
[ -d $HOME/emptydir ] || mkdir $HOME/emptydir
rsync --delete -a $HOME/emptydir/$BSERVER::$USER/$BACKUPDIR/
rmdir $HOME/emptydir
# now the actual transfer
rsync $OPTS $BDIR $BSERVER::$USER/current
二、备份至一个空闲的硬盘
#!/bin/sh
export PATH=/usr/local/bin:/usr/bin:/bin
LIST="rootfs usr data data2"
for d in $LIST; do
mount /backup/$d
rsync -ax --exclude fstab --delete /$d/ /backup/$d/
umount /backup/$d
done
DAY=`date "+%A"`
rsync -a --delete /usr/local/apache/data2/backups/$DAY
rsync -a --delete /data/solid /data2/backups/$DAY
三、对vger.rutgers.edu的cvs树进行镜像
#!/bin/bash
cd /var/www/cvs/vger/
PATH=/usr/local/bin:/usr/freeware/bin:/usr/bin:/bin
RUN=`lps x | grep rsync | grep -v grep | wc -l`
if [ "$RUN" -gt 0 ]; then
echo already running
exit 1
fi
rsync -az vger.rutgers.edu::cvs/CVSROOT/ChangeLog$HOME/ChangeLog
sum1=`sum $HOME/ChangeLog`
sum2=`sum /var/www/cvs/vger/CVSROOT/ChangeLog`
if [ "$sum1" = "$sum2" ]; then
echo nothing to do
exit 0
fi
rsync -az --delete --force vger.rutgers.edu::cvs//var/www/cvs/vger/
exit 0
FAQ
Q：如何经过ssh进行rsync，并且无须输入密码？
A：能够经过如下几个步骤
1. 经过ssh-keygen在server A上创建SSH keys，不要指定密码，你会在~/.ssh下看到identity和identity.pub文件
2. 在server B上的home目录创建子目录.ssh
3. 将A的identity.pub拷贝到server B上
4. 将identity.pub加到~[user b]/.ssh/authorized_keys
5. 因而server A上的A用户，可经过下面命令以用户B ssh到server B上了
e.g. ssh -l userB serverB
这样就使server A上的用户A就能够ssh以用户B的身份无需密码登录到serverB上了。
Q：如何经过在不危害安全的状况下经过防火墙使用rsync?
A：解答以下：
这一般有两种状况，一种是服务器在防火墙内，一种是服务器在防火墙外。不管哪一种状况，一般仍是使用ssh，这时最好新建一个备份用户，而且配置 sshd仅容许这个用户经过RSA认证方式进入。若是服务器在防火墙内，则最好限定客户端的IP地址，拒绝其它全部链接。若是客户机在防火墙内，则能够简单容许防火墙打开TCP端口22的ssh外发链接就ok了。
Q：我能将更改过或者删除的文件也备份上来吗？
A：固然能够：
你可使用如：rsync -other -options-backupdir = ./backup-2000-2-13 ...这样的命令来实现。
这样若是源文件:/path/to/some/file.c改变了，那么旧的文件就会被移到./backup-2000-2-13/path/to/some/file.c，
这里这个目录须要本身手工创建起来
Q：我须要在防火墙上开放哪些端口以适应rsync？
A：视状况而定
rsync能够直接经过873端口的tcp链接传文件，也能够经过22端口的ssh来进行文件传递，但你也能够经过下列命令改变它的端口：
rsync --port 8730 otherhost::
或者
rsync -e 'ssh -p 2002' otherhost:
Q：我如何经过rsync只复制目录结构，忽略掉文件呢？
A：rsync -av --include '*/' --exclude '*' source-dir dest-dir
Q：为何我总会出现"Read-only file system"的错误呢？
A：看看是否忘了设"read only = no"了
Q：为何我会出现'@ERROR: invalid gid'的错误呢？
A：rsync使用时默认是用uid=nobody;gid=nobody来运行的，若是你的系统不存在nobody组的话，就会出现这样的错误，能够试试gid = nogroup或者其它
Q：绑定端口873失败是怎么回事？
A：若是你不是以root权限运行这一守护进程的话，由于1024端口如下是特权端口，会出现这样的错误。你能够用--port参数来改变。
Q：为何我认证失败？
A：从你的命令行看来：
你用的是：
>; bash$ rsync -a 144.16.251.213::test test
>; Password:
>; @ERROR: auth failed on module test
>;
>; I dont understand this. Can somebody explainas to how to acomplish this.
>; All suggestions are welcome.
应该是没有以你的用户名登录致使的问题，试试rsync -amax@144.16.251.213::test test

 

 

 

 

来源： https://blog.csdn.net/u012865381/article/details/77506397

 

 

补充：rsync实战：https://blog.csdn.net/qq_41816540/article/details/80611757