配置rsync+inotify实现站点文件实时同步

1、rsync简介

• rsync是linux系统下的数据镜像备份工具。能够在不一样主机之间镜像同步整个目录树，支持增量备份，保持连接和权限，且采用优化的同步算法，在传输前执行压缩，所以很是适用于异地备份、镜像服务器等应用。
• rsync的官方站点为http:rsync.samba.org/

2、使用rsync备份工具

2.一、rsync命令的基本用法

• 用法相似于cp命令，例如将文件/etc/fstab 和目录/boot/grub同步备份到.opt目录下，其中-r表示递归整个目录，-l选项用来备份连接文件。

rsync /etc/fstab /opt
rsync -rl /etc/fstab /boot/grub /opt

经常使用命令格式及备份选项：
-v, --verbose 详细模式输出

-q, --quiet 精简输出模式

-c, --checksum 打开校验开关，强制对文件传输进行校验

-a, --archive 归档模式，表示以递归方式传输文件，并保持全部文件属性，等于-rlptgoD

-r, --recursive 对子目录以递归模式处理

-p, --perms 保持文件权限

-o, --owner 保持文件属主信息

-g, --group 保持文件属组信息

-z, --compress 对备份的文件在传输时进行压缩处理

-delete 删除那些DST中SRC没有的文件，保证两边文件同步对齐

• 配置源的表示方法
• 在执行远程同步时，rsync须要指定同步源服务器中的资源位置。

rsync同步资源的表示方式为 “用户名@主机地址::共享模块名”
或者，“rsync://用户名@主机地址/共享模块名”
前者为两个冒号分割形式，后者为URL地址形式，例如
执行如下操做将访问rsync同步源，并下载到本地/root目录下进行备份
[root@localhost~]# rsync -avz backuper@192.168.144.110::abc /root
或者
[root@localhost~]# rsync -avz rsync://backuper@192.168.144.110/abc /root

执行如下操做访问源服务器中的abc共享模块，并下载到本地的/opt目录下：
[root@localhost~]# rsync -avzH --delete backuper@192.168.144.110::abc /opt

实际生产环境中一般都是计划性重复执行的，为了在周期性计划任务中不用输入密码交互式执行，
须要建立一个密码文件，保存用户的密码，如/etc/server.pass，在执行rsync同步时使用选项
--password-file=/etc/server.pass,指定便可。

crontab -e
30 22 * * * /usr/bin/rsync --delete --password-file=/etc/server.pass backuperA@192.168.144.110::abc /opt   //天天22:30执行脚本
servevice crond restart
chkconfig crond on

3、配置rsync+inotify实时同步

• notify是一种强大的、细粒度的、异步的文件系统事件监控机制，Linux内核从2.6.13版本起，加入了对inotify的支持。经过inotify能够监控文件系统中添加、删除、修改、移动等各类事件，利用这个内核接口，inotify-tools即可以监控文件系统下文件的各类变化状况了。

• 查看内核版本

uname -r

一、系统环境

主机	操做系统	IP地址	所需软件
rsync源服务器	CentOS 7.0 x86_64	192.168.144.110	rsync+inotify-tools-3.14.tar.gz
rsync备份服务器	CentOS 7.0 x86_64	192.168.144.120	rsync+inotify-tools-3.14.tar.gz

二、软件安装

rpm -q rsync //查询rsync是否安装，通常为系统自带安装
yum install rsync -y //若没有安装，使用yum安装

• 安装inotify软件包

tar zxzvf notify-tools-3.14.tar.gz -C /opt
cd /opt/inotify-tools-3.14
./configuer
make && make install

三、调整inotify内核参数

vim /etc/sysctl.conf

fs.inotify.max_queued_events = 16384    //监控事件队列数
fs.inotify.max_user_instances = 1024    //最多监控实例数
fs.inotify.max_user_watches = 1048576    //实例最多监控文件数

四、配置rsync源于备份服务器

vim /etc/rsyncd.conf

# /etc/rsyncd: configuration file for rsync daemon mode

# See rsyncd.conf man page for more options.

# configuration example:
 uid = nobody                   //rsync服务uid
 gid = nobody                   //rsync服务gid
 use chroot = yes               //禁锢家目录
 pid file = /var/run/rsyncd.pid     //进程文件目录
address = 192.168.144.110       //源服务器监听地址           
port = 873                      //服务端口号
log file = /var/log/rsyncd.log  //指定日志文件位置
hosts allow = *                 //容许任意网段服务器可与之同步
# max connections = 4           //最大连接数
# # exclude = lost+found/
# # transfer logging = yes
# # timeout = 900
# # ignore nonreadable = yes
# # dont compress   = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2
#
# # [ftp]
# # path = /home/ftp
# # comment = ftp export area
#
#
 [abc]                  //共享模块名称，两台服务器能够不一样
 path = /var/www/html   //共享模块路径，两台服务器能够不一样
 comment = www.yun.com  //模块描述，两台服务器能够不一样  
 read only = no         //关闭只读权限，不写或者注释为默认选择只读
 write only = no        //关闭可写权限，不写或者注释为默认选择不可写
 uid = root             //指定模块uid
 gid = root             //指定模块gid
 hosts allow = *        //容许任意网段服务器访问此模块
 auth users=test        //模块访问验证用户名称
 secrets file = /etc/rsyncd_users.db        //模块验证密码文件，键值对形式
 dont compress   = *.gz *.tgz *.zip *.z *.Z *.rpm *.deb *.bz2   //同步过程当中遇到此类文件不进行压缩

• 此处须要注意，上述配置文件中，备份服务器的配置须要和源服务器如出一辙，除了备份服务器的不然在源服务器上行文件时会报错。尤为是密码文件权限和独立密码文件权限须要为600，不然也会报错。

• 启动服务

rsync --daemon

• 结束服务，kill进程便可。

4.一、建立帐户验证文件

• 根据配置文件中，按需建立，注意文件路径与名称。

vim /etc/rsyncd_users.db

test:abc123     //"用户名:密码"的形式

chmod 600 /etc/rsyncd_users.db

• 因为这种形式在执行命令时须要交互式验证，所以须要建立独立密码验证文件。

4.二、建立独立密码文件

vim /etc/server.pass

abc123    //只含密码的文件

chmod 600 /etc/server.pass

4.三、编写触发式同步脚本

vim /opt/ino.sh

#!/bin/bash
DESIP=192.168.144.120     //设置源服务器须要将文件上行(发送)到备份服务器IP地址
INOTIFY_CMD="inotifywait -mrq -e modify,create,attrib,move,delete /var/www/html/"
RSYNC_CMD="rsync -azH --delete --password-file=/etc/server.pass /var/www/html/ test@$DESIP::abc/"
$INOTIFY_CMD | while read DIRECTORY EVENT FILE
do
    if [ $(pgrep rsync | wc -l) -gt 0 ] ; then
        $RSYNC_CMD
    fi
done

• 此处须要注意，在两台服务器须要同步的目录之间，也须要将目录权限放到最大，避免因目录自己权限报错。

chmod +x /opt/ino.sh

4.四、源服务器端测试

• 执行脚本后，当前终端会变成实时监控界面，须要从新打开终端操做。
• 在源服务器端共享模块目录下进行文件操做，而后去备份服务器下，可观察到文件已经被实时同步。