[转帖] rsync同步备份服务器_OpenStack, 云计算等杂项讨论区_Weblogic技术|Tuxedo技术|中间件技术|Oracle论坛|JAVA论坛|Linux/Unix技术|hadoop论坛_联动北方技术论坛  
网站首页 | 关于我们 | 服务中心 | 经验交流 | 公司荣誉 | 成功案例 | 合作伙伴 | 联系我们 |
联动北方-国内领先的云技术服务提供商
»  游客             当前位置:  论坛首页 »  自由讨论区 »  OpenStack, 云计算等杂项讨论区 »
总帖数
1
每页帖数
101/1页1
返回列表
0
发起投票  发起投票 发新帖子
查看: 4192 | 回复: 0   主题: [转帖] rsync同步备份服务器        上一篇   下一篇 
张三丰
注册用户
等级:上尉
经验:511
发帖:53
精华:0
注册:2013-11-19
状态:离线
发送短消息息给张三丰 加好友    发送短消息息给张三丰 发消息
发表于: IP:您无权察看 2013-11-21 10:29:02 | [全部帖] [楼主帖] 楼主

做系统维护,数据备份的重要性怎么强调都不过分,因此一款好用的备份工具是必不可少的,我独爱rsync,速度快、安全、
高效,接下来我就介绍如何配置通rsync同步备份服务器。

一般来说,一台linux服务器安装之后,直接用rysnc命令就就可以备份,但这仅仅是client,我们现在要做的是建立一台专门
的备份服务器来接收客户端的备份数据,所以我们需要配置rsync服务器,让它常驻系统,通常有2种方法,自身的daemon功能
和通过xinetd守护,但是无论哪种方法,都需要一个配置文件/etc/rsyncd.conf,需要我们自己创建。

客户端约定:
客户端1:test1.host1.com(192.168.0.1)
客户端2:test2.host2.com(192.168.0.2)

服务器端约定:
服务器ip:192.168.0.100
rsync配置文件:/etc/rsyncd.conf
备份文件存储主目录:/home/backup
客户端1数据存储目录:/home/backup/test1.host1.com
客户端1数据存储目录:/home/backup/test2.host2.com

接下来的操作,都是在备份服务器上进行的。

第一步,我们还是先检查一下系统是否安装了rsync。

 [root@backup ~]# rpm -q rsync
rsync-2.6.8-3.1


看来我的系统已经安装了,如果你没安装,请执行下面的命令。

 [root@backup ~]# yum -y install rsync


第二步,创建/etc/rsyncd.conf文件,内容如下。

#主要全局参数
uid           = root
gid           = root
use chroot    = yes                 #为了安全考虑,让rsync运行于chroot环境
log file      = /var/log/rsyncd.log #rsync的日志文件
pid file      = /var/run/rsyncd.pid #rsync的pid文件
hosts allow   = 192.168.0.0/24      #允许访问的网络(我还推荐你在系统防火墙里也要设置)
hosts deny    = *                   #除了允许的之外,默认禁止访问
#为每个客户端服务器专门配置
[test1.host1.com]
comment = backup for test1.host1.com
path = /home/backup/test1.host1.com
read only = no
hosts allow = 192.168.0.1
[test2.host2.com]
comment = backup for test2.host2.com
path = /home/backup/test2.host2.com
read only = no
hosts allow = 192.168.0.2


保存退出,如果你需要更多配置参数,请参照man rsyncd.conf

第三步,准备备份数据的存储目录

[root@backup ~]# mkdir -p /home/backup/{test1.host1.com,test2.host2.com}


注:如果你需要备份2层以上的主目录,比如/var/lib/mysql/,最好事先在备份服务器上把要备份的多层主目录创建好。

[root@backup ~]# mkdir -p /home/backup/test1.host1.com/var/lib/mysql


第四步,各种东西准备好了,现在我们该启动rsync了,2种方法,你任选一种。

1.使用rsync的–daemon选项启动,rsync服务默认使用873号端口。

[root@backup ~]# rsync --daemon
[root@backup ~]# lsof -i:873
COMMAND  PID USER   FD   TYPE DEVICE SIZE NODE NAME
rsync   3464 root    3u  IPv6  11515       TCP *:rsync (LISTEN)
rsync   3464 root    4u  IPv4  11516       TCP *:rsync (LISTEN)


可以看到rsync已经启动成功了。如果你要把他添加到开机启动,可以通过/etc/rc.local文件,执行如下命令即可。

[root@backup ~]# echo '/usr/bin/rsync --daemon' >> /etc/rc.local


如果你需要终止它,执行

[root@backup ~]# pkill rsync
[root@backup ~]# lsof -i:873
[root@backup ~]#


可以看到已经关闭了。但是很多用户可能希望,像别的程序一样通过启动脚本/etc/init.d/xxxx来启动或者终止服务会更方
便,由于篇幅太长,我在后面的博文中再介绍。

2.xinetd守护
修改/etc/xinetd.d/rsync文件,把

disable = yes


改成

disable = no


然后重启xinetd即可,

[root@backup ~]# /etc/init.d/xinetd restart


如果你的xinetd开机并没自动启动的话,需要执行

[root@backup ~]# chkconfig xinetd on


第五步,到此为止,rsync服务器端已经完成了,接下来,我们以客户端test1.host1.com(192.168.0.1)为例,试试如何同
步文件。注意,该步操作时在客户端服务器上进行的。
约定:
备份脚本路径:/root/bin/backup.sh
需要备份的目录:/etc/ /home/

1.创建一个简单的备份脚本/root/bin/backup.sh,内容如下。

#!/bin/sh
#command
rsync=/usr/bin/rsync
echo=/bin/echo
#backup server info
remote_host=192.168.0.100
remote_path=test1.host1.com
#backup
backup_path="/etc/ /home/"
for path in $backup_path;
do
date=`date "+%D %H:%M:%S"`
$echo "--- Start Backup $path $date ----"
$rsync -av --delete $path $remote_host::$remote_path$path
date=`date "+%D %H:%M:%S"`
$echo "--- End Backup $path $date ----"
done
exit 0


2.好了,我们来执行一下看看备份情况。

[root@test1 ~]# /root/bin/backup.sh
--- Start Backup /etc/ 02/22/11 09:48:36 ----
building file list ... done
created directory /etc


传送的每个文件的详细信息省略......

 sent 2960717 bytes  received 1828 bytes  658343.33 bytes/sec
total size is 2954407  speedup is 1.00
--- End Backup /home/ 02/22/11 09:50:20 ----


已经备份完毕了,你可以去备份服务器上去看看备份情况了。

到此为止,一个简单的rsync同步备份服务器的配置和备份测试都已经OK了,可是要是你的服务器是通过公网备份的话,就是
很危险的,接下来我再说明一下如何用ssh来加密我们备份数据的传输。

第六步,通过ssh加密传输。
约定:备份服务器在初期状态是通过密码认证登录的并且root可以登录。

1.接下来的操作是在客户端上进行的,我们还是以test1.host1.com(192.168.0.1)为例。

[root@test1 ~]# ssh-keygen -t rsa
Generating public/private rsa key pair.


Enter file in which to save the key (/root/.ssh/id_rsa):直接回车

 Created directory '/root/.ssh'.


Enter passphrase (empty for no passphrase):一定直接回车
Enter same passphrase again:一定直接回车

 Your identification has been saved in /root/.ssh/id_rsa.
Your public key has been saved in /root/.ssh/id_rsa.pub.
The key fingerprint is:
94:b7:51:5e:6b:6b:01:81:b2:e1:a6:6b:e8:56:a2:8c root@test1.host1.com


然后,把公钥通过scp复制到备份服务器(192.168.0.100)上去。

[root@test1 ~]# scp ~/.ssh/id_rsa.pub 192.168.0.100:/root/.ssh/
The authenticity of host '192.168.0.100 (192.168.0.100)' can't be established.
RSA key fingerprint is 3c:fe:7e:0a:35:79:a2:cf:13:55:ba:87:8b:62:e5:cb.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added '192.168.0.100' (RSA) to the list of known hosts.
root@192.168.0.100's password:
id_rsa.pub                                    100%  404     0.4KB/s   00:00


修改前面我们创建的backup.sh文件,在第5行后追加2行:

ssh=/usr/bin/ssh
key=/root/.ssh/id_rsa


把第16行

$rsync -av --delete $path $remote_host::$remote_path$path


改成

$rsync -av -e "$ssh -i $key" --delete $path $remote_host::$remote_path$path


2.接下来的操作在备份服务器端进行的,把刚刚复制到备份服务器的公钥追加到/root/.ssh/authorized_keys末尾。

[root@backup ~]# cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys
[root@backup ~]# chmod 600 /root/.ssh/authorized_keys


3.最后,通过1和2小步将所有客户端的公钥都上传到备份服务器上之后,我们修改/etc/ssh/sshd_config
文件,禁止使用密码登陆。这一步也是在备份服务器上进行的。

PasswordAuthentication yes


改成

PasswordAuthentication no


重启sshd

[root@backup ~]#/etc/init.d/sshd restart


好了,现在你可以在你客户端执行备份脚本来备份了,如果你再加上crontab计划任务来执行,那么就更方便了。
比如我们追加每天早上4点30分备份,并把备份过程的信息和错误信息记录到/var/log/backup.log,那么修改/etc/crontab文
件,追加如下一行。

30 04 * * * root /root/bin/backup.sh >> /var/log/backup.log 2>&1


当然如果时间长了,日志文件/var/log/backup.log会很大,可以通过logrotate来管理日志,我将在以后的博文中介绍如何用logrotate来管理日志文件。

注1:可能有人会发现,一遍一遍的在各个客户端上生产公钥和密钥,然后把公钥复制到备份服务器上去,
而为什么不在备份服务器上生产公钥和密钥,然后把私钥复制到客户端去呢?这样当然也是可以的,但是所有的客户端都是用
同一套密钥和公钥认证,安全性降低了。同样我还推荐你定期更换密钥和公钥对。

注2:关于备份脚本你可以根据你自己的需求去完善,而且rsync的功能远不止这点。比如有的人想把/etc每天都备份,保存一个
星期的,这样我们可以先在本地创建一个专门的备份目录/backup,以星期为前缀打包/etc,然后再把备份目录上传到备份服务器上。

#backup for /etc
OLDLANG=$LANG
export LANG="us_EN.UTF-8"
weekday=`date +"%A"`
$tar -czvf /backup/${weekday}.etc.tar.gz /etc
export LANG=$OLDLANG


注3:由于备份服务器打开了root登录功能,建议你在防火墙里设置只能是客服端和管理端的ip可以连接22号端口。

注4:如果你总觉的打开了root登录还是危险,那么我们再在备份服务器端做如下限制,让rsync用root登录时只能执行我们允
许的命令。

修改/etc/ssh/sshd_config

PermitRootLogin yes


改成

PermitRootLogin forced-commands-only


然后重启sshd

创建一个检查命令是否允许的脚本/root/.ssh/checkcmd.sh,内容如下:

#!/bin/sh
if [[ "$SSH_ORIGINAL_COMMAND" =~ "rsync\ --server*" ]]
then
$SSH_ORIGINAL_COMMAND
else
echo "Reject"
fi


给脚本添加执行权限:

[root@backup ~]# chmod u+x /root/.ssh/checkcmd.sh


然后修改/root/.ssh/authorized_keys文件,在对应客户端的公钥前面追加选项,
还是以test1.host1.com(192.168.0.1)的公钥为例。
from="192.168.0.1",command="/root/.ssh/checkcmd.sh" ssh-rsa 密钥其他内容省略== root@test1.host1.com              




赞(0)    操作        顶端 
总帖数
1
每页帖数
101/1页1
返回列表
发新帖子
请输入验证码: 点击刷新验证码
您需要登录后才可以回帖 登录 | 注册
技术讨论