rsync是一款开源,快速,多功能的可实现增量的本地或远程的数据镜像同步备份的优秀工具。适用于多个平台。从软件名称可以看出来是远程同步的意思(remote sync)可实现全量备份与增量备份,因此非常适合用于架构集中式备份或异地备份等应用。
873
c/s 客户端/服务端
b/s 浏览器/服务端
全量备份
将客户端所有的数据内容全都备份到服务端
增量备份
将客户端数据内容(不包含已备份到服务端的内容)增量备份到服务端
所有主机推送本地数据至rsync备份服务器,会导致数据同步缓慢(适合少量数据备份)
机器量不是很多的时候,可以使用推送
rsync备份服务端拉取所有主机上的数据,会导致备份服务器开销大
机器量很大的时候,推和拉协同使用
rsync大致使用三种主要的数据传输方式
local:
本地传输
local: rsync [option...] src... [dest]
rsync ---备份命令(cp)
[options] ---选项
src... ---本地源文件
[dest] ---本地目标文件
[root@backup ~]# rsync -avz /etc/passwd /tmp/ [root@backup ~]# ls /tmp/passwd /tmp/passwd
access via remote shell: 远程传输
pull: rsync [option...] [user@]host:src... [dest] 下载(拉)
pull ---拉取, 下载
rsync ---备份命令
[options] ---选项
[user@] ---目标主机的系统用户
host ---目主机ip地址或域名
src... ---目标主机源文件
[dest] ---下载至本地哪个位置
下载pull
[root@nfs ~]# pwd /root [root@nfs ~]# echo "this nfs" > file [root@backup ~]# rsync -avz root@172.16.1.31:/root/file /opt/ [root@backup ~]# cat /opt/file this nfs
push: rsync [option...] src... [user@]host:dest 上传(推)
push ---推,上传
rsync ---备份命令
[options] ---选项
src... ---本地源文件
[user@] ---目标主机的系统用户
host ---目主机ip地址或域名
[dest] ---目标对应位置
上传push(将backup的file2文件上传至nfs服务器的/mnt目录)
[root@backup ~]# pwd /root [root@backup ~]# echo "this rsync" > file2 [root@backup ~]# rsync -avz /root/file2 root@172.16.1.31:/mnt [root@nfs ~]# cat /mnt/file2 this rsync
推送目录(推送/root/目录下面的所有文件和目录,不会推送/root/目录本身)
[root@backup ~]# rsync -avz /root/ root@172.16.1.31:/tmp /root/
推送目录,推送目录本身以及目录下面的所有文件
[root@backup ~]# rsync -avz /root root@172.16.1.31:/tmp /root
远程方式存在的缺陷:
1.需要使用系统用户(不安全)
2.使用普通用户(权限存在问题)
3.需要走ssh协议
access via rsync daemon: 守护进程方式传输
pull: rsync [option...] [user@]host::src... [dest]
rsync ---命令
[option...] ---选项
[user@] ---远程主机用户(虚拟用户)
host:: ---远程主机地址
src... ---远程主机模块(不是目录)
[dest] ---将远程主机数据备份至本地什么位置
拉取rsync备份服务的backup模块数据至本地/mnt目录
[root@nfs01 ~]# rsync -avz rsync_backup@192.172.16.1.41::backup/ /mnt/ push: rsync [option...] src... [user@]host::dest
push: rsync [option...] src... [user@]host::dest
rsync ---命令
[option...] ---选项
src... ---远程主机模块(不是目录)
[user@] ---远程主机用户(虚拟用户)
host:: ---远程主机地址
[dest] ---将远程主机模块备份至本地什么位置
将本地/mnt目录推送至rsync备份服务器的backup模块
[root@nfs01 ~]# rsync -avz /mnt/ rsync_backup@192.172.16.1.41::backup/
紫色字符表示不固定,根据自己需求调整。红色字符表示警告。
-a |
归档模式传输, 等于-tropgdl |
-v |
详细模式输出, 打印速率, 文件数量等 |
-z |
传输时进行压缩以提高效率 |
-r |
递归传输目录及子目录,即目录下得所有目录都同样传输 |
-t |
保持文件时间信息 |
-o |
保持文件属主信息 |
-p |
保持文件权限 |
-g |
保持文件属组信息 |
-l |
保留软连接 |
-p |
显示同步的过程及传输时的进度等信息 |
-d |
保持设备文件信息 |
-l |
保留软连接指向的目标文件 |
-e |
使用的信道协议,指定替代rsh的shell程序 |
--exclude=pattern |
指定排除不需要传输的文件模式 |
--exclude-from=file |
文件名所在的目录文件 |
--bwlimit=100 |
限速传输 |
--partial |
断点续传 |
--delete |
让目标目录和源目录数据保持一致 谨慎使用 |
角色 |
外网ip(nat) |
内网ip(lan) |
主机名 |
rsync服务端 |
eth0:10.0.0.41 |
eth1:172.16.1.41 |
backup |
rsync客户端 |
eth0:10.0.0.31 |
eth1:172.16.1.31 |
nfs |
[root@backup ~]# yum install rsync -y
查询配置文件存放的路径
[root@backup ~]# rpm -qc rsync /etc/rsyncd.conf
进行配置
[root@backup ~]# vi /etc/rsyncd.conf 先把原有的内容清除,这里要用vi进行编辑,不能使用vim uid = rsync gid = rsync port = 873 fake super = yes use chroot = no max connections = 200 timeout = 600 ignore errors read only = false list = false auth users = rsync_backup secrets file = /etc/rsync.password log file = /var/log/rsyncd.log ##################################### [backup] comment = welcome to oldboyedu backup! path = /backup
# 全局模块 uid = rsync --- 运行进程的用户 gid = rsync --- 运行进程的用户组 port = 873 --- 监听端口 fake super = yes --- 无需让rsync以root身份运行,允许存储文件的完整属性 use chroot = no --- 关闭假根功能 max connections = 200 --- 最大连接数 timeout = 600 --- 超时时间 ignore errors --- 忽略错误信息 read only = false --- 对备份数据可读写 list = false --- 不允许查看模块信息 auth users = rsync_backup --- 定义虚拟用户,作为连接认证用户 secrets file = /etc/rsync.passwd ---定义rsync服务用户连接认证密码文件路径 ##局部模块 [backup] --- 定义模块信息 comment = commit --- 模块注释信息 path = /backup --- 定义接收备份数据目录
[root@backup ~]# useradd -m -s /sbin/nologin rsync
[root@backup ~]# mkdir /backup [root@backup ~]# chown -r rsync.rsync /backup/
创建虚拟用户和密码文件,并赋予600权限
[root@backup ~]# echo "rsync_backup:1" >/etc/rsync.password 密码设置为1 [root@backup ~]# chmod 600 /etc/rsync.password
[root@backup ~]# systemctl start rsyncd [root@backup ~]# systemctl enable rsyncd
[root@bogon ~]# netstat -lntp active internet connections (only servers) proto recv-q send-q local address foreign address state pid/program name tcp 0 0 0.0.0.0:873 0.0.0.0:* listen 4758/rsync
rsync实现简单的本地打包和推送
rsync [option...] src... [user@]host::dest
[root@nfs ~]# rsync -avz /etc/passwd rsync_backup@172.16.1.41::backup
pull: rsync [option...] [user@]host::src... [dest]
[root@nfs ~]# rsync -avz rsync_backup@172.16.1.41::backup /opt
在服务端创建密码文件并赋予600权限
[root@nfs ~]# echo "1" >/etc/rsync.password 这里1代表密码,密码要和服务端的一致 [root@nfs ~]# chmod 600 /etc/rsync.password
执行rsync服务端模块[/backup]下载至本地的命令加--password-file=/etc/rsync.password
[root@nfs ~]# rsync -avz rsync_backup@172.16.1.41::backup /opt --password-file=/etc/rsync.password
export rsync_password=1 设置rsync_password环境变量=1 这里的1是密码,密码要和服务端的一致 [root@nfs ~]# rsync -avz rsync_backup@172.16.1.41::backup /opt
systemctl start rsyncd netstat -lntp 查看端口
systemctl disable firewalld systemctl stop firewalld
sed -i '/^selinux=/c selinux=disabled' /etc/selinux/config
chmod 600 /etc/rsync.password
vi /etc/rsyncd.conf
chown -r rsync.rsync /backup/
如对本文有疑问, 点击进行留言回复!!
linux下文本编辑器vim的使用方法(复制、粘贴、替换、行号、撤销、多文件操作)
网友评论