Rsync定时同步+异地备份

Rsync定时同步+异地备份

​ 简介：Rsync是unix系统下的一个数据备份工具。可实现本地文件的拷贝，与远程文件的同步传输。

特点：

1、Rsync安装便捷，使用方便。

2、传输过程中以压缩解压形式，减少带宽占用。

3、能更新整个文件数。

4、安全，能用 rsh、ssh 或直接端口做为传输端口，或者 socket 连接。

5、亮点是免费。

​ 简单来讲Rcync的目的是实现两台主机上的文件同步。（包括本机推送远程文件，远程拉取本机文件两种方式）

​ 嗯哼，两台主机的文件同步这就涉及到了，源服务器和目标服务器了。

以你要同步的文件为基准，要同步的文件在A服务器，A服务器就作为源服务器。B服务器就是目标服务器。

​ 理解了主次，需求就来了：我们需要将A服务器上的某个文件，同步到B服务器上的某个文件夹下，如何实现？

​ 以Centos为例：

1、输入rsync，查看系统是否安装了该工具。

2、没有安装则手动安装。

yum install rsync -y

扩展

rsync具有本地文件拷贝功能。

本地文件同步类似拷贝命令cp，将a文件夹同步到b文件夹

rsync -源文件夹 源路径  目标路径
rsync -a /tmp/a/  /tmp/b

参数：-a存档 -av存档并去重

一、以ssh ip直连的方式实现文件同步。

以ssh方式连接需要密码：

rsync -av -e "ssh -p 端口号" 源文件夹  目标用户@目标ip:目标文件夹（将a文件夹的文件同步到c文件夹下）
rsync -av -e "ssh -p 22" /tmp/a/  [email protected]:/tmp/c

二、以模块组件方式实现文件同步。

Rsync可以作为一个服务器，同其他Rsync组件进行远程连接

在源服务器上安装好Rsync后，启动

yum -y install rsync xinetd
两种启动方式：
(1)独立启动 /usr/bin/rsync –-daemon
(2)用xinetd超级进程启动/etc/rc.d/init.d/xinetd reload

扩展：
rsync默认端口：837 （注意防火墙是否拦截）
/usr/bin/rsync --daemon  --config=/etc/rsyncd/rsyncd.conf 　#--config用于指定rsyncd.conf的位置,如果在/etc下可以不写

1、不受密码保护的方式

1）写入配置文件：

#创建 rsyncd.conf，这是 rsync 服务器的配置文件
vi /etc/rsyncd.conf 

#模块名
[mag_sync]
#源文件路径
path = /usr/local/mongodb/data/auditLog
是否允许客户端可以查看可用模块列表，默认为可以
list = yes
#是否只读
read only = no
#忽略错误
ignore errors

2）查看模块 rsync 124.71.8.140::

3）查看模块下绑定文件夹中的文件 rsync 124.71.8.140::mag_sync

4）拉取模块下绑定的文件夹到目标文件夹下 rsync -av 124.71.8.140::mag_sync /root/data/mongologs/

可以看到文件同步完毕

2、受密码保护的方式

1）修改配置文件

#用户
uid = root 
#用户组
gid = root
#日志文件路径
log file = /var/log/rsyncd.log
secrets file = /etc/rsyncd/rsyncd.secrets
#模块名
[mag_sync]
#源文件路径
path = /usr/local/mongodb/data/auditLog
是否允许客户端可以查看可用模块列表，默认为可以
list = yes
#是否只读
read only = no
#忽略错误
ignore errors
#认证用户
auth users =root

2）添加密码：vi /etc/rsyncd/rsyncd.secrets

用户名:密码

3）给权限

chmod 600 /etc/rsyncd/rsyncd.secrets

4）测试（目标服务器连接时需要密码输入）

rsync [email protected]::mag_sync

3、目标服务器调用源服务器拉取文件，自动获取密码配置

1）在目标服务器保存密码

vi /etc/rsync.password

Zz@1qaz2wsx

2）给权限:

chmod 600 /etc/rsync.password

3）拉取源文件

远程调用：rsync --password-file=密码存放路径 用户名@源服务器ip::模块名 要保存在哪个文件夹路径下
rsync -av --password-file=/etc/rsync.password [email protected]::mag_sync /root/data/mongologs/

三、定期实现文件同步

​ 需求：让rsync 客户端自动与服务器同步数据

​ 思路：

​ 1、编写一个拉取源文件的脚本。（rsync）

​ 2、开一个定时任务，定期执行该脚本。（cron 系统调度进程）

​ crontab命令用于设置周期性被执行的指令。该命令从标准输入设备读取指令，并将其存放于“crontab”文件中，以供之后读取和执行。

​ 1、检查是否安装了crontab，如果提示未安装请自行安装

rpm -qa | grep crontab

#vixie-cron软件包是cron的主程序； 
#crontabs软件包是用来安装、卸装、或列举用来驱动 cron 守护进程的表格的程序。
yum install  vixie-cron
yum install  crontabs  (centos安装指令)

#安装完以后开启crontab服务
service crond start

service crond start //启动服务
service crond stop //关闭服务
service crond restart //重启服务
service crond reload //重新载入配置

查看crontab服务状态：service crond status

​ 2、新增调度任务可用两种方法：

​ 先新建一个脚本文件：

vi /root/data/pulllog.sh
rsync -av --password-file=/etc/rsync.password [email protected]::mag_sync /root/data/mongologs/

默认创建的这个sh问件是没有执行权限的，修改权限
chmod 777 pulllog.sh

分  时 天 月 星期  以root用户身份来运行  执行的脚本路径
*   *  *  *  *     root              /root/data/pulllog.sh

​ 1)、在命令行输入: crontab -e 然后添加相应的任务，wq存盘退出。

​ 2)、直接编辑/etc/crontab 文件，即vi /etc/crontab，添加相应的任务。

crontab -e配置是针对某个用户的，而编辑/etc/crontab是针对系统的任务
查看调度任务
crontab -l //列出当前的所有调度任务
crontab -l -u jp //列出用户jp的所有调度任务

crontab -r //删除所有任务调度工作

​ 3）查看调度任务

crontab -l

​ 没有的话重启服务

service crond restart

​ 如果有错，Linux会在执行的时候发送一份邮件给你

cat /var/spool/mail/root

至此文件定期执行脚本拉取源文件同步到新文件夹中就实现了