RSync实现文件备份同步.docx
《RSync实现文件备份同步.docx》由会员分享,可在线阅读,更多相关《RSync实现文件备份同步.docx(12页珍藏版)》请在冰豆网上搜索。
![RSync实现文件备份同步.docx](https://file1.bdocx.com/fileroot1/2022-11/27/68884741-c16d-4243-af5a-3c4ffe730c7a/68884741-c16d-4243-af5a-3c4ffe730c7a1.gif)
RSync实现文件备份同步
RSync实现文件备份同步
一、什么是rsync
rsync,remotesynchronize顾名思意就知道它是一款实现远程同步功能的软件,它在同步文件的同时,可以保持原来文件的权限、时间、软硬链接等附加信息。
rsync是用“rsync算法”提供了一个客户机和远程文件服务器的文件同步的快速方法,而且可以通过ssh方式来传输文件,这样其保密性也非常好,另外它还是免费的软件。
rsync包括如下的一些特性:
能更新整个目录和树和文件系统;
有选择性的保持符号链链、硬链接、文件属于、权限、设备以及时间等;
对于安装来说,无任何特殊权限要求;
对于多个文件来说,内部流水线减少文件等待的延时;
能用rsh、ssh或直接端口做为传输入端口;
支持匿名rsync同步文件,是理想的镜像工具;
二、架设rsync服务器
架设rsync服务器比较简单,写一个配置文件rsyncd.conf。
文件的书写也是有规则的,我们可以参照rsync.samba.org上的文档来做。
当然我们首先要安装好rsync这个软件才行;
A、rsync的安装;
获取rsync
rysnc的官方网站:
http:
//rsync.samba.org/可以从上面得到最新的版本。
目前最新版是3.05。
当然,因为rsync是一款如此有用的软件,所以很多Linux的发行版本都将它收录在内了。
软件包安装
#sudoapt-get install rsync 注:
在debian、ubuntu等在线安装方法;
#yuminstallrsync 注:
Fedora、Redhat等在线安装方法;
#rpm-ivhrsync 注:
Fedora、Redhat等rpm包安装方法;
其它Linux发行版,请用相应的软件包管理方法来安装。
源码包安装
tarxvf rsync-xxx.tar.gz
cdrsync-xxx
./configure--prefix=/usr ;make;makeinstall 注:
在用源码包编译安装之前,您得安装gcc等编译开具才行;
B、配置文件
rsync的主要有以下三个配置文件rsyncd.conf(主配置文件)、rsyncd.secrets(密码文件)、rsyncd.motd(rysnc服务器信息)
服务器配置文件(/etc/rsyncd.conf),该文件默认不存在,请创建它。
具体步骤如下:
#touch/etc/rsyncd.conf #创建rsyncd.conf,这是rsync服务器的配置文件。
#touch/etc/rsyncd.secrets #创建rsyncd.secrets,这是用户密码文件。
#chmod600/etc/rsyncd/rsyncd.secrets #将rsyncd.secrets这个密码文件的文件属性设为root拥有,且权限要设为600,否则无法备份成功!
#touch/etc/rsyncd.motd
下一就是我们修改rsyncd.conf和rsyncd.secrets和rsyncd.motd文件的时候了。
设定/etc/rsyncd.conf
rsyncd.conf是rsync服务器主要配置文件。
我们先来个简单的示例,后面在详细说明各项作用。
比如我们要备份服务器上的/home和/opt,在/home中我想把easylife和samba目录排除在外;
#DistributedunderthetermsoftheGNUGeneralPublicLicensev2
#Minimalconfigurationfileforrsyncdaemon
#Seersync
(1)andrsyncd.conf(5)manpagesforhelp
#Thislineisrequiredbythe/etc/init.d/rsyncdscript
pidfile=/var/run/rsyncd.pid
port=873
address=192.168.1.171
#uid=nobody
#gid=nobody
uid=root
gid=root
usechroot=yes
readonly=yes
#limitaccesstoprivateLANs
hostsallow=192.168.1.0/255.255.255.010.0.1.0/255.255.255.0
hostsdeny=*
maxconnections=5
motdfile=/etc/rsyncd.motd
#Thiswillgiveyouaseparatelogfile
#logfile=/var/log/rsync.log
#Thiswilllogeveryfiletransferred-upto85,000+peruser,persync
#transferlogging=yes
logformat=%t%a%m%f%b
syslogfacility=local3
timeout=300
[rhel4home]
path=/home
list=yes
ignoreerrors
authusers=root
secretsfile=/etc/rsyncd.secrets
comment=ThisisRHEL4data
exclude=easylife/ samba/
[rhel4opt]
path=/opt
list=no
ignoreerrors
comment=ThisisRHEL4opt
authusers=easylife
secretsfile=/etc/rsyncd/rsyncd.secrets
注:
关于authusers是必须在服务器上存在的真实的系统用户,如果你想用多个用户以,号隔开,比如authusers=easylife,root
设定密码文件
密码文件格式很简单,rsyncd.secrets的内容格式为:
用户名:
密码
我们在例子中rsyncd.secrets的内容如下类似的;在文档中说,有些系统不支持长密码,自己尝试着设置一下吧。
easylife:
keer
root:
mike
chownroot.rootrsyncd.secrets #修改属主
chmod600rsyncd.secrets #修改权限
注:
1、将rsyncd.secrets这个密码文件的文件属性设为root拥有,且权限要设为600,否则无法备份成功!
出于安全目的,文件的属性必需是只有属主可读。
2、这里的密码值得注意,为了安全你不能把系统用户的密码写在这里。
比如你的系统用户easylife密码是000000,为了安全你可以让rsync中的easylife为keer。
这和samba的用户认证的密码原理是差不多的。
设定rsyncd.motd文件;
它是定义rysnc服务器信息的,也就是用户登录信息。
比如让用户知道这个服务器是谁提供的等;类似ftp服务器登录时,我们所看到的linuxsir.orgftp……。
当然这在全局定义变量时,并不是必须的,你可以用#号注掉,或删除;我在这里写了一个rsyncd.motd的内容为:
++++++++++++++++++++++++++++++++++++++++++++++
Welcometousethersyncservices!
2002------2009
++++++++++++++++++++++++++++++++++++++++++++++
三、rsyncd.conf服务器的配置详解
A、全局定义
在rsync服务器中,全局定义有几个比较关健的,根据我们前面所给的配置文件rsyncd.conf文件;
pidfile=/var/run/rsyncd.pid 注:
告诉进程写到/var/run/rsyncd.pid文件中;
port=873 注:
指定运行端口,默认是873,您可以自己指定;
address=192.168.1.171 注:
指定服务器IP地址
uid=nobody
gid=nobdoy
注:
服务器端传输文件时,要发哪个用户和用户组来执行,默认是nobody。
如果用nobody用户和用户组,可能遇到权限问题,有些文件从服务器上拉不下来。
所以我就偷懒,为了方便,用了root。
不过您可以在定义要同步的目录时定义的模块中指定用户来解决权限的问题。
usechroot=yes
注:
用chroot,在传输文件之前,服务器守护程序在将chroot到文件系统中的目录中,这样做的好处是可能保护系统被安装漏洞侵袭的可能。
缺点是需要超级用户权限。
另外对符号链接文件,将会排除在外。
也就是说,你在rsync服务器上,如果有符号链接,你在备份服务器上运行客户端的同步数据时,只会把符号链接名同步下来,并不会同步符号链接的内容;这个需要自己来尝试
readonly=yes
注:
readonly是只读选择,也就是说,不让客户端上传文件到服务器上。
还有一个writeonly选项,自己尝试是做什么用的吧;
#limitaccesstoprivateLANs
hostsallow=192.168.1.0/255.255.255.010.0.1.0/255.255.255.0
注:
在您可以指定单个IP,也可以指定整个网段,能提高安全性。
格式是ip与ip之间、ip和网段之间、网段和网段之间要用空格隔开;
maxconnections=5
注:
客户端最多连接数
motdfile=/etc/rsyncd/rsyncd.motd
注:
motdfile是定义服务器信息的,要自己写rsyncd.motd文件内容。
当用户登录时会看到这个信息。
比如我写的是:
++++++++++++++++++++++++++++++++++++++++++++++
Welcometousethersyncservices!
2002------2009
++++++++++++++++++++++++++++++++++++++++++++++
logfile=/var/log/rsync.log
注:
rsync服务器的日志;
transferlogging=yes
注:
这是传输文件的日志
logformat=%t%a%m%f%b
syslogfacility=local3
timeout=300
B、模块定义
模块定义什么呢?
主要是定义服务器哪个目录要被同步。
每个模块都要以[name]形式。
这个名字就是在rsync客户端看到的名字,其实有点象Samba服务器提供的共享名。
而服务器真正同步的数据是通过path指定的。
我们可以根据自己的需要,来指定多个模块。
每个模块要指定认证用户,密码文件、但排除并不是必须的
下面是前面配置文件模块的例子:
[rhel4home] #模块它为我们提供了一个链接的名字,在本模块中链接到了/home目录;要用[name]形式
path=/home #指定文件目录所在位置,这是必须指定的
authusers=root #认证用户是root ,是必须在服务器上存在的用户
list=yes #list意思是把rsync服务器上提供同步数据的目录在服务器上模块是否显示列出来。
默认是yes。
如果你不想列出来,就no;如果是no是比较安全的,至少别人不知道你的服务器上提供了哪些目录。
你自己知道就行了;
ignoreerrors #忽略IO错误
secretsfile=/etc/rsyncd.secrets #密码存在哪个文件
comment=linuxsirhome data #注释可以自己定义
exclude=beinan/samba/
注:
exclude是排除的意思,也就是说,要把/home目录下的easylife和samba排除在外;easylife/和samba/目录之间有空格分开
[rhel4opt]
path=/opt
list=no
comment=optdir
authusers=beinan
secretsfile=/etc/rsyncd/rsyncd.secrets
ignoreerrors
四、启动rsync服务器及防火墙的设置
启动rsync服务器相当简单,有以下几种方法
A、--daemon参数方式,是让rsync以服务器模式运行
#/usr/bin/rsync--daemon --config=/etc/rsyncd/rsyncd.conf #--config用于指定rsyncd.conf的位置,如果在/etc下可以不写
B、xinetd方式
修改services加入如下内容
#nano-w/etc/services
rsync 873/tcp #rsync
rsync 873/udp #rsync
这一步一般可以不做,通常都有这两行(我的RHEL4和GENTOO默认都有)。
修改的目的是让系统知道873端口对应的服务名为rsync。
如没有的话就自行加入。
设定/etc/xinetd.d/rsync,简单例子如下:
#default:
off
#description:
Thersyncserverisagoodadditiontoamftpserver,asit\
# allowscrcchecksummingetc.
servicersync
{
disable=no
socket_type =stream
wait =no
user =root
server =/usr/bin/rsync
server_args =--daemon
log_on_failure +=USERID
}
上述,主要是要打开rsync這個daemon,一旦有rsyncclient要连接時,xinetd会把它转介給rsyncd(port873)。
然后servicexinetdrestart,使上述设定生效.
rsync服务器和防火墙
Linux防火墙是用iptables,所以我们至少在服务器端要让你所定义的rsync服务器端口通过,客户端上也应该让通过。
#iptables-AINPUT-ptcp-mstate--stateNEW -mtcp--dport873-jACCEPT
#iptables-L 查看一下防火墙是不是打开了873端口
如果你不太懂防火墙的配置,可以先serviceiptablesstop将防火墙关掉。
当然在生产环境这是很危险的,做实验才可以这么做哟!
五、通过rsync客户端来同步数据
A、语法详解
在配置完rsync服务器后,就可以从客户端发出rsync命令来实现各种同步的操作。
rsync有很多功能选项,下面就对介绍一下常用的选项:
rsync的命令格式可以为:
1.rsync[OPTION]...SRC[SRC]...[USER@]HOST:
DEST
2.rsync[OPTION]...[USER@]HOST:
SRCDEST
3.rsync[OPTION]...SRC[SRC]...DEST
4.rsync[OPTION]...[USER@]HOST:
:
SRC[DEST]
5.rsync[OPTION]...SRC[SRC]...[USER@]HOST:
:
DEST
6.rsync[OPTION]...rsync:
//[USER@]HOST[:
PORT]/SRC[DEST]
rsync有六种不同的工作模式:
1.拷贝本地文件;当SRC和DES路径信息都不包含有单个冒号":
"分隔符时就启动这种工作模式。
2.使用一个远程shell程序(如rsh、ssh)来实现将本地机器的内容拷贝到远程机器。
当DST路径地址包含单个冒号":
"分隔符时启动该模式。
3.使用一个远程shell程序(如rsh、ssh)来实现将远程机器的内容拷贝到本地机器。
当SRC地址路径包含单个冒号":
"分隔符时启动该模式。
4.从远程rsync服务器中拷贝文件到本地机。
当SRC路径信息包含":
:
"分隔符时启动该模式。
5.从本地机器拷贝文件到远程rsync服务器中。
当DST路径信息包含":
:
"分隔符时启动该模式。
6.列远程机的文件列表。
这类似于rsync传输,不过只要在命令中省略掉本地机信息即可。
-a以archive模式操作、复制目录、符号连接相当于-rlptgoD
rsync中的参数
-r是递归
-l是链接文件,意思是拷贝链接文件;-p表示保持文件原有权限;-t保持文件原有时间;-g保持文件原有用户组;-o保持文件原有属主;-D相当于块设备文件;
-z传输时压缩;
-P传输进度;
-v传输时的进度等信息,和-P有点关系,自己试试。
可以看文档;
-essh的参数建立起加密的连接。
-u只进行更新,防止本地新文件被重写,注意两者机器的时钟的同时
--progress是指显示出详细的进度情况
--delete是指如果服务器端删除了这一文件,那么客户端也相应把文件删除,保持真正的一致
--password-file=/password/path/file来指定密码文件,这样就可以在脚本中使用而无需交互式地输入验证密码了,这里需要注意的是这份密码文件权限属性要设得只有属主可读。
B、一些实例
B1、列出rsync服务器上的所提供的同步内容;
首先:
我们看看rsync服务器上提供了哪些可用的数据源
#rsync --list-only root@192.168.145.5:
:
++++++++++++++++++++++++++++++++++++++++++++++
Welcometousethersyncservices!
2002------2009
++++++++++++++++++++++++++++++++++++++++++++++
rhel4home ThisisRHEL4data
注:
前面是rsync所提供的数据源,也就是我们在rsyncd.conf中所写的[rhel4home]模块。
而“ThisisRHEL4data”是由[rhel4home]模块中的comment=ThisisRHEL4data提供的;为什么没有把rhel4opt数据源列出来呢?
因为我们在[rhel4opt]中已经把list=no了。
$rsync --list-only root@192.168.145.5:
:
:
:
rhel4home
++++++++++++++++++++++++++++++++++++++++++++++
Welcometousethersyncservices!
2002------2009
++++++++++++++++++++++++++++++++++++++++++++++
Password:
drwxr-xr-x 40962009/03/1521:
33:
13.
-rw-r--r-- 10182009/03/0202:
33:
41ks.cfg
-rwxr-xr-x 212882009/03/1521:
33:
13wgetpaste
drwxrwxr-x 40962008/10/2821:
04:
05cvsroot
drwx------ 40962008/11/3016:
30:
58easylife
drwsr-sr-x 40962008/09/2022:
18:
05giddir
drwx------ 40962008/09/2914:
18:
46quser1
drwx------ 40962008/09/2714:
38:
12quser2
drwx------ 40962008/11/1406:
10:
19test
drwx------ 40962008/09/2216:
50:
37vbird1
drwx------ 40962008/09/1915:
28:
45vbird2
后面的root@ip中,root是指定密码文件中的用户名,之后的:
:
rhel4home这是rhel4home模块名
B2、rsync客户端同步数据;
#rsync-avzP root@192.168.145.5:
:
rhel4home rhel4home
Password:
这里要输入root的密码,是服务器端rsyncd.secrets提供的。
在前面的例子中我们用的是mike,输入的密码并不回显,输好就回车。
注:
这个命令的意思就是说,用root用户登录到服务器上,把rhel4home数据,同步到本地当前目录rhel4home上。
当然本地的目录是可以你自己定义的。
如果当你在客户端上当前操作的目录下没有rhel4home这个目录时,系统会