Linux服务管理-rsync

最新推荐文章于 2025-09-06 14:30:06 发布
原创 最新推荐文章于 2025-09-06 14:30:06 发布 · 276 阅读 · 0 ·
本内容遵循CC 4.0 BY-SA版权协议
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
标签
#linux #rsync
本文介绍了Linux中的rsync工具，用于数据镜像备份和远程同步。rsync具备保持文件权限、时间戳等特性的快速增量备份功能，并可通过ssh安全传输。文章详细讲解了rsync的ssh认证协议、命令使用以及结合inotify实现文件系统的实时同步，确保数据一致性。

rsync

1. rsync简介

rsync是linux系统下的数据镜像备份工具。使用快速增量备份工具Remote Sync可以远程同步，支持本地复制，或者与其他SSH、rsync主机同步。

2. rsync特性

它的特性如下：

  • 可以镜像保存整个目录树和文件系统。
  • 可以很容易做到保持原来文件的权限、时间、软硬链接等等。
  • 无须特殊权限即可安装。
  • 快速：第一次同步时 rsync 会复制全部内容，但在下一次只传输修改过的文件。rsync 在传输数据的过程中可以实行压缩及解压缩操作，因此可以使用更少的带宽。
  • 安全：可以使用scp、ssh等方式来传输文件，当然也可以通过直接的socket连接。
    支持匿名传输，以方便进行网站镜像。

3. rsync的ssh认证协议

rsync命令来同步系统文件之前要先登录remote主机认证，认证过程中用到的协议有2种：

  • ssh协议
  • rsync协议

rsync server端不用启动rsync的daemon进程，只要获取remote host的用户名和密码就可以直接rsync同步文件
rsync server端因为不用启动daemon进程，所以也不用配置文件/etc/rsyncd.conf

ssh认证协议跟scp的原理是一样的，如果在同步过程中不想输入密码就用ssh-keygen -t rsa打通通道

//这种方式默认是省略了 -e ssh 的，与下面等价：
rsync -avz /SRC -e ssh root@192.168.188.129:/DEST 
    -a  //文件宿主变化，时间戳不变
    -z  //压缩数据传输
 
//当遇到要修改端口的时候，我们可以：
rsync -avz /SRC -e "ssh -p2222" root@192.168.188.129:/DEST  
//修改了ssh 协议的端口，默认是22

4. rsync命令

//Rsync的命令格式常用的有以下三种：
    rsync [OPTION]... SRC DEST
    rsync [OPTION]... SRC [USER@]HOST:DEST
    rsync [OPTION]... [USER@]HOST:SRC DEST
　　
//对应于以上三种命令格式，rsync有三种不同的工作模式：
1）拷贝本地文件。当SRC和DES路径信息都不包含有单个冒号":"分隔符时就启动这种工作模式。如：
[root@localhost1 ~]# ls
anaconda-ks.cfg
[root@localhost1 ~]# rsync anaconda-ks.cfg a.cfg
[root@localhost1 ~]# ll
total 8
-rw-------  1 root root 1249 Jul 28 06:03 a.cfg
-rw-------. 1 root root 1249 Jul 27 06:14 anaconda-ks.cfg

2）使用一个远程shell程序(如rsh、ssh)来实现将本地机器的内容拷贝到远程机器。当DST路径地址包 \
含单个冒号":"分隔符时启动该模式。如：
[root@localhost1 ~]# rsync -avz a.cfg root@192.168.88.129:/root/b.cfg
root@192.168.88.129's password: 
sending incremental file list
a.cfg

sent 770 bytes  received 35 bytes  322.00 bytes/sec
total size is 1,249  speedup is 1.55

[root@localhost1 ~]# ssh root@192.168.88.129 'ls -l /root'
root@192.168.88.129's password: 
total 8
-rw-------. 1 root root 1249 Jul 27 06:14 anaconda-ks.cfg
-rw-------  1 root root 1249 Jul 28 06:03 b.cfg

3）使用一个远程shell程序(如rsh、ssh)来实现将远程机器的内容拷贝到本地机器。当SRC地址路径 \
包含单个冒号":"分隔符时启动该模式。如：
[root@localhost1 ~]# rsync -avz root@192.168.88.129:/etc/yum.repos.d /root/
root@192.168.88.129's password: 
receiving incremental file list
yum.repos.d/
yum.repos.d/CentOS-Base.repo
yum.repos.d/CentOS-CR.repo
yum.repos.d/CentOS-Debuginfo.repo
yum.repos.d/CentOS-Media.repo
yum.repos.d/CentOS-Sources.repo
yum.repos.d/CentOS-Vault.repo
yum.repos.d/CentOS-fasttrack.repo

sent 161 bytes  received 3,726 bytes  1,554.80 bytes/sec
total size is 12,536  speedup is 3.23
[root@localhost1 ~]# ls
a.cfg  anaconda-ks.cfg  yum.repos.d
[root@localhost1 ~]# ls yum.repos.d/
CentOS-Base.repo       CentOS-fasttrack.repo  CentOS-Vault.repo
CentOS-CR.repo         CentOS-Media.repo
CentOS-Debuginfo.repo  CentOS-Sources.repo

//rsync常用选项：
    -a, --archive       //归档
    -v, --verbose       //啰嗦模式
    -q, --quiet         //静默模式
    -r, --recursive     //递归
    -p, --perms         //保持原有的权限属性
    -z, --compress      //在传输时压缩，节省带宽，加快传输速度
    --delete            //在源服务器上做的删除操作也会在目标服务器上同步

5. rsync+inotify

Inotify是一种强大的、细粒度的、异步的文件系统事件监控机制，linux内核从2.6.13起，加入了Inotify支持，通过Inotify可以监控文件系统中添加、删除，修改、移动等各种细微事件，利用这个内核接口，第三方软件就可以监控文件系统下文件的各种变化情况，而inotify-tools就是这样的一个第三方软件。
在前面有讲到，rsync可以实现触发式的文件同步，但是通过crontab守护进程方式进行触发，同步的数据和实际数据会有差异，而inotify可以监控文件系统的各种变化，当文件有任何变动时，就触发rsync同步，这样刚好解决了同步数据的实时性问题。

6. rsync+inotify配置

环境说明：

操作系统服务器类型IP地址应用主机名
centos7源服务器192.168.88.128rsync inotify-tools 脚本localhost1
centos7目标服务器192.168.88.129rsynclocalhost2

需求：

  • 把源服务器上/etc目录实时同步到目标服务器的/tmp/下

在目标服务器上做以下操作：

//关闭防火墙与SELINUX
[root@localhost2 ~]# systemctl status firewalld
● firewalld.service - firewalld - dynamic firewall daemon
   Loaded: loaded (/usr/lib/systemd/system/firewalld.service; disabled; vendor preset: enabled)
   Active: inactive (dead)
     Docs: man:firewalld(1)
[root@localhost2 ~]# getenforce 
Disabled

//安装rsync服务端软件
[root@localhost2 ~]# yum -y install rsync

//设置rsyncd.conf配置文件
[root@localhost2 ~]# cat >> /etc/rsyncd.conf <<EOF
log file = /var/log/rsyncd.log
pidfile = /var/run/rsyncd.pid     
lock file = /var/run/rsync.lock   
secrets file = /etc/rsync.pass

[etc_from_client]     
path = /tmp/
comment = sync etc from client
uid = root        
gid = root        
port = 873        
ignore errors     
use chroot = no       
read only = no    
list = no
max connections = 200
timeout = 600
auth users = admin
hosts allow = 192.168.88.128
EOF

//创建用户认证文件
[root@localhost2 ~]# echo 'admin:123456' > /etc/rsync.pass
[root@localhost2 ~]# cat /etc/rsync.pass
admin:123456

//设置文件权限
[root@localhost2 ~]# chmod 600 /etc/rsync*
[root@localhost2 ~]# ll /etc/rsync*
-rw------- 1 root root 881 Jul 28 06:56 /etc/rsyncd.conf
-rw------- 1 root root  13 Jul 28 06:58 /etc/rsync.pass

//启动rsync服务并设置开机自启动
[root@localhost2 ~]# systemctl enable --now rsyncd
Created symlink from /etc/systemd/system/multi-user.target.wants/rsyncd.service to /usr/lib/systemd/system/rsyncd.service.
[root@localhost2 ~]# ss -antl
State      Recv-Q Send-Q Local Address:Port               Peer Address:Port              
LISTEN     0      100    127.0.0.1:25                    *:*                  
LISTEN     0      5         *:873                   *:*                  
LISTEN     0      128       *:22                    *:*                  
LISTEN     0      100       [::1]:25                 [::]:*                  
LISTEN     0      5      [::]:873                [::]:*                  
LISTEN     0      128    [::]:22                 [::]:*

在源服务器上做以下操作：

//关闭防火墙与SELINUX
[root@localhost1 ~]# systemctl status firewalld.service 
● firewalld.service - firewalld - dynamic firewall daemon
   Loaded: loaded (/usr/lib/systemd/system/firewalld.service; disabled; vendor preset: enabled)
   Active: inactive (dead)
     Docs: man:firewalld(1)
[root@localhost1 ~]# getenforce 
Disabled

//配置yum源
[root@localhost1 ~]# yum -y install epel-release

//安装rsync服务端软件，只需要安装，不要启动，不需要配置
[root@localhost1 ~]# yum -y install rsync

//创建认证密码文件
[root@localhost1 ~]# echo '123456' > /etc/rsync.pass
[root@localhost1 ~]# cat /etc/rsync.pass
123456

//设置文件权限，只设置文件所有者具有读取、写入权限即可
[root@localhost1 ~]# chmod 600 /etc/rsync.pass
[root@localhost1 ~]# ll /etc/rsync.pass
-rw------- 1 root root 7 Jul 28 07:08 /etc/rsync.pass

//在源服务器上创建测试目录，然后在源服务器运行以下命令
[root@localhost1 ~]# mkdir -pv /root/etc/test
mkdir: created directory ‘/root/etc’
mkdir: created directory ‘/root/etc/test’
[root@localhost1 ~]# rsync -avH --port 873 --progress --delete /root/etc/ admin@192.168.88.129::etc_from_client --password-file=/etc/rsync.pass
sending incremental file list
deleting systemd-private-c357fd8d8f9f433fb091b5dd61ac4873-chronyd.service-KsQ6Pc/tmp/
deleting systemd-private-c357fd8d8f9f433fb091b5dd61ac4873-chronyd.service-KsQ6Pc/
deleting .font-unix/
deleting .XIM-unix/
deleting .X11-unix/
deleting .Test-unix/
deleting .ICE-unix/
deleting yum.log
deleting ks-script-HSu57Q
./
test/

sent 77 bytes  received 286 bytes  726.00 bytes/sec
total size is 0  speedup is 0.00
//运行完成后，在目标服务器上查看，在/tmp目录下有test目录，说明数据同步成功




//安装inotify-tools工具，实时触发rsync进行同步
//查看服务器内核是否支持inotify
[root@localhost1 ~]# ll /proc/sys/fs/inotify/
total 0
-rw-r--r-- 1 root root 0 Jul 28 07:16 max_queued_events
-rw-r--r-- 1 root root 0 Jul 28 07:16 max_user_instances
-rw-r--r-- 1 root root 0 Jul 28 07:16 max_user_watches
//如果有这三个max开头的文件则表示服务器内核支持inotify

//安装inotify-tools
[root@localhost1 ~]# yum -y install inotify-tools

//写同步脚本，此步乃最最重要的一步，请慎之又慎。让脚本自动去检测我们制定的目录下 \
//文件发生的变化，然后再执行rsync的命令把它同步到我们的服务器端去
[root@localhost1 ~]# mkdir /scripts
[root@localhost1 ~]# vim /scripts/inotify.sh
host=192.168.88.129     
src=/etc
des=etc_from_client
password=/etc/rsync.pass        
user=admin          
inotifywait=/usr/bin/inotifywait

$inotifywait -mrq --timefmt '%Y%m%d %H:%M' --format '%T %w%f%e' -e modify,delete,create,attrib $src \
| while read files;do
    rsync -avzP --delete  --timeout=100 --password-file=${password} $src $user@$host::$des
    echo "${files} was rsynced" >>/tmp/rsync.log 2>&1
done

[root@localhost1 ~]# chmod +x /scripts/inotify.sh

//启动脚本
[root@localhost1 ~]# nohup bash /scripts/inotify.sh &
[1] 1308
[root@localhost1 ~]# nohup: ignoring input and appending output to ‘nohup.out’

//在源服务器上生成一个新文件
[root@localhost1 ~]# ls /etc/httpd/
conf  conf.d  conf.modules.d  logs  modules  run
[root@localhost1 ~]# echo 'hello world' > /etc/httpd/test

//查看inotify生成的日志
[root@localhost1 ~]# tail /tmp/rsync.log
20200728 07:26 /etc/httpd/testCREATE was rsynced
20200728 07:26 /etc/httpd/testMODIFY was rsynced
//从日志上可以看到，我们生成了一个test文件，并且添加了内容到其里面

设置脚本开机自动启动：

[root@localhost1 ~]# chmod +x /etc/rc.d/rc.local
[root@localhost1 ~]# echo 'nohup /bin/bash /scripts/inotify.sh' >> /etc/rc.d/rc.local

到目标服务器上去查看是否把新生成的文件自动传上去了：

[root@localhost2 ~]# ls /tmp/
etc
systemd-private-f084fec6b06f4097b85aa2b111ce44cf-chronyd.service-zlGxhT
test

//由此可见，已将源服务器的/etc目录整个同步到了目标服务器
信创平台下构建rsync服务，同步与备份数据
三禾工作室
11-10 2370
Rsync（remote synchronize，https://www.samba.org/ftp/rsync/rsync.html）是一个远程数据同步工具，可通过LAN/WAN快速同步多台主机间的文件。Rsync使用“Rsync算法”来使本地和远 程两个主机之间的文件达到同步，这个算法只传送两个文件的不同部分，而不是每次都整份传送，因此速度相当快。rsync是可以实现增量备份的工具。配合任务计划，rsync能实现定时或间隔同步，配合inotify或sersync，可以实现触发式的实时同步。rsync可以
文件的读写基本操作
热门推荐
范高伦的博客
09-07 1万+
一、文件是计算机中数据持久化存储的表现形式 读写文件标准操作格式1： 1、打开文件：file1 = open('文件名','读写模式') 2、操作文件 3、关闭文件：file1.close() 文件操作完毕后必须关闭，否则长期保持对文件的连接状态，造成内存溢出的现象发生 读写文件操作格式2： # 1、打开文件 file1 = open('demo.txt','w') # 2、操作文件 file1.write('hello world') # 3、关闭文件 file1.close() 1、打开文件：wi
rsync算法原理和工作流程分析
zhaominyong的专栏
06-11 2312
在开始分析算法原理之前，简单说明下rsync的增量传输功能。 假设待传输文件为A，如果目标路径下没有文件A，则rsync会直接传输文件A，如果目标路径下已存在文件A，则发送端视情况决定是否要传输文件A。rsync默认使用"quick check"算法，它会比较源文件和目标文件(如果存在)的文件大小和修改时间mtime，如果两端文件的大小或mtime不同，则发送端会传输该文件，否则将忽略该文件。 如果"quick check"算法决定了要传输文件A，它不会传输整个文件A，而是只传源文件A和目标文件A所不同
rsync原理
缘来侍你的博客
09-17 1397
简介： Rsync（remote synchronize）是一个远程数据同步工具，可通过LAN/WAN快速同步多台主机间的文件。Rsync使用所谓的“Rsync算法”来使本地和远 程两个主机之间的文件达到同步，这个算法只传送两个文件的不同部分，而不是每次都整份传送，因此速度相当快。 特点: 1.可以镜像保存整个目录树和文件系统； 2.可以很容易做到保持原来文件的权限、时间、软硬链接等； 3.无须特殊权限即可安装； 4.优化的流程，文件传输效率高； 5.可以使用rsh、ssh等方式来传输文件...
linux 重启rsync服务,linux下通过xinetd服务管理 rsync 实现开机自启动
weixin_42303522的博客
05-05 611
1.1 xinetd服务配置1.1.1 检查xinetd服务是否安装[root@backup ~]# rpm -qa xinetd[root@backup ~]# rpm -ql xinetdpackage xinetd is not installed1.1.2 安装xinetd服务[root@backup ~]# yum install xinetd -y[root@backup ~]# rp...
rsync linux 教程,Linux基础教程学习笔记13——Rsync服务管理
weixin_32700139的博客
05-02 150
一、rsync的基本语法：需要注意的是，通过daemon接入和Shell接入，如果使用的是 User@HOST这样的格式，那么它们的区别是，daemon使用的是::,而Shell使用的是：；Local: rsync [OPTION...] SRC... [DEST]Access via remote shell 通过shell接入:接收Pull: rsync [OPTION...] [USER@...
linux开机启动rsync,linux下通过xinetd服务管理 rsync 实现开机自启动
weixin_34401781的博客
05-14 290
1.1.1 检查xinetd服务是否安装[root@backup ~]# rpm -qa xinetd[root@backup ~]# rpm -ql xinetdpackage xinetd is not installed1.1.2 安装xinetd服务[root@backup ~]# yum install xinetd -y[root@backup ~]# rpm -qa xinetdxi...
linux通用自启动管理,linux下通过xinetd服务管理 rsync 实现开机自启动
weixin_33259400的博客
05-14 197
1.1 xinetd服务配置1.1.1 检查xinetd服务是否安装[root@backup ~]# rpm -qa xinetd[root@backup ~]# rpm -ql xinetdpackage xinetd is not installed1.1.2 安装xinetd服务[root@backup ~]# yum install xinetd -y[root@backup ~]# rp...
Linux 环境下实战 Rsync 备份工具及配置 rsync+inotify 实时同步_rsync官网(1)
2201_75604341的博客
05-10 541
最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！
39、Linux系统管理与网络配置全解析
ooo22的博客
08-06 60
本文全面解析了Linux系统管理中的备份管理、服务管理和网络配置相关内容。涵盖了rsync、Deja-Dup、BackupPC和Amanda等多种备份工具的使用方法，介绍了systemd、systemctl和chkconfig等服务管理命令，以及Network Manager和静态网络配置等网络管理技术。通过实际案例分析，帮助读者掌握如何在企业及个人环境中实现数据备份、服务控制和网络优化，是Linux系统管理的重要参考资料。
服务控制
d_x_p_152265的博客
05-22 168
问题 查看autofs服务是否启动 停止autofs服务，再次查看服务的运行状态 查看network服务支持哪几种控制方式 重启bluetooth、network服务 开启rsync临时服务（需要安装xinetd服务） 方案 对于服务大家要记得首先要分清的是这个服务是独立服务还是临时服务。 独立服务的启动脚本一般会放在/etc/init.d/。 临时服务的配置文件一般会放在/etc/x...
40、网络安全与文件管理：SSH 与 Linux 防火墙全解析
最新发布
vulkan6gpu的博客
09-06 44
本文详细解析了网络安全与文件管理中的核心工具和技术，包括SSH服务和Linux防火墙。内容涵盖SSH安全连接、文件同步工具rsync的使用、基于密钥的认证配置、以及RHEL系统中firewalld防火墙的区域管理与规则配置。通过实践操作和示例命令，帮助用户提升系统安全性和网络管理能力。
Linux 常用命令
wx774891的博客
09-16 219
1、Linux之间Copy数据 scp [可选参数] 文件路径 目标路径 例如当前登陆A系统，复制数据到B scp -r ./test/* root@192.168.1.2:/opt/test/ 即将当前系统的test目录 复制到ip为192.168.1.2的B系统上，以用户root进行复制，注意这时B系统上/opt/test/目录必须存在，且拥有者为root，且有写的权限 修改拥有者：chown root:root /opt/test 修改权限：chmod 777 /opt/test ...
Linux运维笔记-几个常用命令
隔壁老王的博客
02-12 581
Linux运维笔记.----------------分钟 (0 - 59)| .------------- 小时 (0 - 23)| | .---------- 日 (1 - 31)| | | .------- 月 (1 - 12)| | | | .---- 周 (0 - 6) (周日=0 or 7)| | | | |* * * * * user-name ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值