Linux下实现文件双向同步

1、Unison简介
Unison是Windows、Linux以及其余Unix平台下均可以使用的文件同步工具,它能使两个文件夹(本地或网络上的)保持内容的一致。Unison拥有与其它一些同步工具或文件系统的相同的特性,但也有自身的特色:
1.跨平台使用;
2.对内核和用户权限没有特别要求;
3.Unison是双向的,它能自动处理两分拷贝中更新没有冲突的部分,有冲突的部分将会显示出来让用户选择更新策略;
4.只要是能连通的两台主机,就能够运行unison,能够直接使用socket链接或安全的ssh链接方式,对带宽的要求不高,使用相似rsync的压缩传输协议。

环境以下:
vm1:10.13.114.19
vm2:10.13.114.32

2、编译安装Unison
Linux下经过源码包编译安装Unison时,须要用到Objective Caml compiler。
经过如下方式安装
[root@vm1 ~]# wget http://caml.inria.fr/pub/distrib/ocaml-3.12/ocaml-3.12.1.tar.gz
[root@vm1 ~]# tar -xzvf ocaml-3.12.1.tar.gz
[root@vm1 ~]# cd ocaml-3.12.1
[root@vm1 ocaml-3.12.1]# ./configure
[root@vm1 ocaml-3.12.1]# make world opt
[root@vm1 ocaml-3.12.1]# make install

编译安装Unison
[root@vm1 ~]# wget http://www.seas.upenn.edu/~bcpierce/unison//download/releases/stable/unison-2.40.63.tar.gz
[root@vm1 ~]# tar -xzvf unison-2.40.63.tar.gz
[root@vm1 ~]# cd unison-2.40.63
[root@vm1 unison-2.40.63]# make UISTYLE=text
[root@vm1 unison-2.40.63]# make install

在执行make install的过程当中,可能会出现如下错误提示:
mv: cannot stat '/root/bin//unison': No such file or directory
make: [doinstall] Error 1 (ignored)
cp unison /root/bin/
cp: cannot create regular file '/root/bin/': Is a directory
make: *** [doinstall] Error 1

出现错误的缘由在与Unison默认是将文件Copy到/root/bin目录,但Linux默认是没有该目录的,所以咱们须要将生成的可执行文件unison复制到系统的PATH目录。
[root@vm1 unison-2.40.63]# cp unison /usr/local/bin



将可执行文件unison上传到远程主机10.13.114.32
[root@vm1 unison-2.40.63]# scp unison root@10.13.114.32:/root/
经过SSH登录到远程主机,再将unison复制到vm2的PATH目录
[root@vm2 ~]#cp unison /usr/local/bin

3、配置ssh key信任
建议经过普通用户进行操做,理由是经过root操做自己就危险,免密码登录的root就更危险了。

在两台服务器上建立admin用户
[root@vm1 ~]# useradd -m admin
[root@vm1 ~]# passwd 12345
[root@vm2 ~]# useradd -m admin
[root@vm2 ~]# passwd 123456

在vm1上建立key并配置vm2的信任
[root@vm1 ~]# su – unison
[admin@vm1 ~]$ ssh-keygen -t rsa
在提示保存私钥(key)和公钥(public key)的位置时,使用默认值;
在提示是否须要私钥密码(passphrase)时,直接敲回车,即不使用私钥密码。
以后,将生成一对密钥,id_rsa(私钥文件)和id_rsa.pub(公钥文件),保存在/home/unison/.ssh/目录下。

将公钥添加到vm2的 authorized_keys 文件中
将文件上传到vm2
[admin@vm1 ~]$ scp ~/.ssh/id_rsa.pub unison@10.13.114.32:/home/unison/

使用rsync用户SSH到登录到远程主机,并将公钥添加到 authorized_keys 文件中
[admin@vm2 ~]$ mkdir .ssh
[admin@vm2 ~]$ chmod 700 .ssh
[admin@vm2 ~]$ mv ~/id_rsa.pub ~/.ssh/authorized_keys
[admin@vm2 ~]$ chmod 600 ~/.ssh/authorized_keys

同理,执行如下步骤在vm2上建立key并配置vm1的信任
[root@vm2 ~]# su – admin
[admin@vm2 ~]$ ssh-keygen -t rsa

将文件上传到vm1
[admin@vm2 ~]$ scp ~/.ssh/id_rsa.pub unison@10.13.114.19:/home/unison/

使用rsync用户SSH到登录到vm1,并将公钥添加到 authorized_keys 文件中
[admin@vm1 ~]$ mv ~/id_rsa.pub ~/.ssh/authorized_keys

重启SSH服务
[root@vm1 ~]# /etc/init.d/sshd restart
[root@vm2 ~]# /etc/init.d/sshd restart

4、Unison的配置与使用
在两台服务器上建立test目录,用于测试
[root@vm1 ~]# su - admin
[unison@vm1 ~]$ mkdir test
[root@vm2 ~]# su - unison
[unison@vm2 ~]$ mkdir test

在两台服务器上分别执行一次unison,若是出现提示确认,则直接敲回车选择默认值
[unison@vm1 ~]$ unison /home/admin/test/ ssh://admin@10.13.114.32//home/admin/test/
[unison@vm2 ~]$ unison /home/admin/test/ ssh://admin@10.13.114.19//home/admin/test/

修改两台服务器的unison配置文件,输入如下内容
[unison@vm1 ~]$ vim /home/unison/.unison/default.prf
 html

  
  
           
  
  
  1. #Unison preferences file 
  2. root = /home/admin/test 
  3. root = ssh://admin@10.13.114.32//home/admin/test/ 
  4. #force = 
  5. #ignore = 
  6. batch = true 
  7. #repeat = 1 
  8. #retry = 3 
  9. owner = true 
  10. group = true 
  11. perms = -1 
  12. fastcheck = false 
  13. rsync = false 
  14. sshargs = -C 
  15. xferbycopying = true 
  16. log = true 
  17. logfile = /home/unison/.unison/unison.log 



[unison@vm2 ~]$ vim /home/unison/.unison/default.prflinux

  
  
           
  
  
  1. #Unison preferences file 
  2. root = /home/admin/test 
  3. root = ssh://admin@10.13.114.19//home/admin/test/ 
  4. #force = 
  5. #ignore = 
  6. batch = true 
  7. #repeat = 1 
  8. #retry = 3 
  9. owner = true 
  10. group = true 
  11. perms = -1 
  12. fastcheck = false 
  13. rsync = false 
  14. sshargs = -C 
  15. xferbycopying = true 
  16. log = true 
  17. logfile = /home/unison/.unison/unison.log 



相关注解以下:
force表示会以本地所指定文件夹为标准,将该目录同步到远端。这里须要注意,若是指定了force参数,那么Unison就变成了单项同步了,也就是说会以force指定的文件夹为准进行同步,相似与rsync。
Unison双向同步基本原理是:假若有A B两个文件夹,A文件夹把本身的改动同步到B,B文件夹也把本身的改动同步到A,最后A B两文件夹的内容相同,是AB文件夹的合集。
Unison双向同步的一个缺点是,对于一个文件在两个同步文件夹中都被修改时,unison是不会去同步的,由于unison没法判断以那个为准。
ignore = Path表示忽略指定目录,即同步时不一样步它。
batch = true,表示全自动模式,接受缺省动做,并执行。
-fastcheck true 表示同步时仅经过文件的建立时间来比较,若是选项为false,Unison则将比较两地文件的内容。
log = true 表示在终端输出运行信息。
logfile 指定输出的log文件。

另外,Unison有不少参数,这里仅介绍经常使用的几个,详细的请参看Unison手册。
-auto //接受缺省的动做,而后等待用户确认是否执行。
-batch //batch mode, 全自动模式,接受缺省动做,并执行。
-ignore xxx //增长 xxx 到忽略列表中
-ignorecase [true|false|default] //是否忽略文件名大小写
-follow xxx //是否支持对符号链接指向内容的同步
owner = true //保持同步过来的文件属主
group = true //保持同步过来的文件组信息
perms = -1 //保持同步过来的文件读写权限
repeat = 1 //间隔1秒后,开始新的一次同步检查
retry = 3 //失败重试
sshargs = -C //使用ssh的压缩传输方式
xferbycopying = true"
-immutable xxx //不变目录,扫描时能够忽略
-silent //安静模式
-times //同步修改时间
-path xxx 参数 //只同步 -path 参数指定的子目录以及文件,而非整个目录,-path 能够屡次出现。

PS:Windows下的unison配置文件默认位于C:\Documents and Settings\currentuser\.unison目录,默认的配置文件名是default.prf。

5、测试
首先分别在server1与server2的/home/unison/test目录下建立文件或目录,而后在server1上执行unison,接着若是在server1与server2上都能看到各自建立的文件,就说明同步成功。

分别在server1与server2上建立文件
[unison@server1 ~]$ cd test
[unison@server1 test]$ touch 1.txt touch 3.txt
[unison@server2 ~]$ cd test
[unison@server2 test]$ touch 2.txt touch 4.txt

在server1上执行unison
[unison@server1 ~]$ unison

在server1与server2上查看文件是否同步
[unison@server1 ~]$ cd test
[unison@server1 test]$ ls
1.txt 2.txt 3.txt 4.txt
[unison@server2 ~]$ cd test
[unison@server2 test]$ ls
1.txt 2.txt 3.txt 4.txt

均看到了“1.txt 2.txt 3.txt 4.txt”全部文件,说明文件同步已经成功!

注意:第一次SSH链接的时候可能须要输入一次密码,以后就不须要输入了。

6、按期或实时执行同步
若是想要按期执行,则经过crontab计划任务来实现,例如经过如下方式设置每5分钟执行一次
[root@server1 ~]# su - unison
[unison@server1 ~]$ crontab -e
1    */5 * * * * /usr/local/bin/unison


 vim

参考资料:http://heylinux.com/archives/845.html安全

相关文章
相关标签/搜索