首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

linux下rsync本地同步

Linux下rsync本地同步基础概念及应用

基础概念

rsync 是一个用于文件和目录同步的工具,它能够在本地或远程之间高效地传输数据。其核心特性包括增量传输、压缩传输以及强大的过滤选项。

优势

  1. 高效性:rsync通过比较文件的修改时间和大小,只传输发生变化的部分,从而节省带宽和时间。
  2. 灵活性:支持多种同步模式和复杂的过滤规则。
  3. 安全性:可以通过SSH等加密通道进行安全传输。

类型

  • 本地同步:在同一台计算机的不同目录之间同步文件。
  • 远程同步:通过网络在不同计算机之间同步文件。

应用场景

  • 备份:定期将重要数据备份到另一个位置。
  • 版本控制:在开发过程中同步不同版本的代码。
  • 资源共享:在团队成员之间共享文件和资源。

示例代码(本地同步)

假设我们有两个目录 /source/destination,我们想要将 /source 目录中的内容同步到 /destination

代码语言:txt
复制
rsync -avz /source/ /destination/
  • -a 表示归档模式,保持文件的所有属性。
  • -v 表示详细输出,显示同步过程中的信息。
  • -z 表示启用压缩以提高传输效率。

遇到的问题及解决方法

问题1:同步过程中出现权限错误

代码语言:txt
复制
rsync: opendir "/source" failed: Permission denied (13)

原因:当前用户没有足够的权限访问 /source 目录。 解决方法:使用 sudo 提升权限或更改目录权限。

代码语言:txt
复制
sudo rsync -avz /source/ /destination/

问题2:同步后文件权限发生变化

代码语言:txt
复制
rsync: chown "/destination/file" failed: Operation not permitted (1)

原因:rsync尝试更改文件的所有者,但当前用户没有此权限。 解决方法:使用 --no-chown 选项禁用所有者更改。

代码语言:txt
复制
rsync -avz --no-chown /source/ /destination/

问题3:同步过程中出现网络中断

代码语言:txt
复制
rsync error: unexplained error (code 255) at rsync.c(605) [Receiver=3.1.2]

原因:网络不稳定或中断导致传输失败。 解决方法:重新运行同步命令,或使用 --partial 选项允许断点续传。

代码语言:txt
复制
rsync -avz --partial /source/ /destination/

通过以上方法,可以有效解决在使用 rsync 进行本地同步时可能遇到的常见问题。

页面内容是否对你有帮助?
有帮助
没帮助

相关·内容

Linux下使用rsync同步文件

遇到的问题是几台游戏服务器,有一台新的服务器之前已经copy(Linux的scp命令)过文件上去,但在测试的过程中发现还是图片无法正常不显示出来,然后用httpwatch去分析请求的资源,发现有一个图片请求的地址是...为了不至于再copy一次,就需要使用文件同步的管理软件了,同事推荐了linux下的rsync,小试了一下,还是很不错的。...假设有服务器A 和 服务器B,现在登录了服务器B,需要将服务器A上的文件同步到服务器B中,将A中有的B中没有的,或是A中文件比B中的文件要新就全部copy过来。...rsync  --help去查看了,这里从其它人写的博客中转载过来的。...参考了: rsync参数详解 rsync 使用说明 使用之前需要先安装rsync,这个直接自行搜索吧..

3.5K20
  • Linux下数据自动同步之rsync

    rsync是类unix系统下的数据镜像备份工具,从软件的命名上就可以看出来了——remote sync。...Windows下数据自动备份同步之Rsync  http://www.linuxidc.com/Linux/2014-01/95722.htm 一、实验环境 服务端:Linux CentOS 6.0...chmod 600 /etc/rsyncd.pw mkdir /root/test 同步数据: rsync -vzrtopg --progress --delete bakweb@192.168.1.220...递归 -t表示保持原文件创建时间 -o表示保持原文件属主 -p表示保持原文件的参数 -g表示保持原文件的所属组 注:如果您需要定期同步数据,把上面同步数据的命令增加到 crontab 里定时同步即可哈...的客户端也安装在这个盘上,所以我是切换到该目录下,调用rsync.exe 程序来同步的哦;您得根据您的实际情况,进行相应调整; 注:如果您需要定时同步数据的话,写一个 .bat文件,放在安装目录的bin

    1.5K10

    rsync - Linux下进行文件同步命令

    rsync是Linux下进行文件同步到一个命令,可以同步两台计算机到文件与目录,利用查找文件中到不同块以减少数据传输。...[-z选项] 这是个压缩选项,只要使用了这个选项,rsync就会把发向对端的数据先进行压缩再传输。对于网络环境较差的情况下建议使用。一般情况下,-z的压缩算法会和gzip的一样。...3、–delete-after:默认情况下,rsync是先清理目的端的文件再开始数据同步;如果使用此选项,则rsync会先进行数据同步,都完成后再删除那些需要清理的文件。...默认情况下,rsync会删除那些传输中断的文件,然后重新传输。但在一些特别情况下,我们不希望重传,而是续传。 我们在使用中,经常会看到有人会使用-P选项,这个选项其实是为了偷懒而设计的。...5、从本地机器拷贝文件到远程rsync服务器中。当DST路径信息包含”::“分隔符时启动该模式。 6、列远程机的文件列表。这类似于rsync传输,不过只要在命令中省略掉本地机信息即可。

    8.4K70

    Linux rsync 同步软件

    说明 源服务器 192.168.1.100 目标服务器 192.168.1.101 源服务器的文件拷贝到目标服务器 安装rsync 源服务器和目标服务器都需要安装rsync yum安装 yum -y install...rsync 源码安装 待更新 rsync 配置参数说明 uid = nobody #进行备份的用户 nobody为任何用户 gid = nobody #进行备份的组 nobody为任何组 use chroot...connections参数的锁文件 log file = /var/log/rsyncd.log #日志文件 [rsyncd_one] # 这里是认证的模块名 path = /root/test #参与同步的目录...chmod 600 /etc/rsyncd.secrets 启动rsync (守护进程方式) /usr/bin/rsync --daemon 如果服务器上装有防火墙,得需要在服务器的iptables中开启...指如果服务器端删除了这一文件,那么客户端也相应把文件删除,保持真正的一致 root 为用户名 @192.168.1.100为服务器IP ::后面的rsyncd为认证的模块名 /root/test2 为备份到本地的目录

    2.8K30

    Linux 环境下实战 Rsync 备份工具及配置 rsync+inotify 实时同步

    Rsync 是一个开源的快速备份工具,是Linux和UNIX操作系统默认安装的组件之一,可在不同主机间镜像同步整个目录,并支持增量备份文件传输,保持链接和权限,采用优化的同步算法,传输前执行压缩,适用于异地备份...2、配置 rsync 源服务器 在远程同步任务中,负责发起 rsync 同步操作的客户端称为发起端,负责响应来自客户端的 rsync 同步操作的服务器称为同步源。...默认情况下 chroot 值为 true。...比如:每天凌晨04:00对服务器的tmp共享模块同步,并下载到本地/mnt/jacktian目录下,通过crond服务来完成。...Linux 从 2.6.13 版内核开始提供了 inotify 通知接口,用来监控文件系统的各种变化情况,如文件的存取,删除,移动,修改等。

    1.2K20

    rsync+inotify实现本地文件实时同步

    配合任务计划,rsync能实现定时或间隔同步,配合inotify或sersync,可以实现触发式的实时同步。 rsync工作方式: rsync有三种工作方式: (1).本地文件系统上实现同步。...(3).本地主机通过网络套接字连接远程主机上的rsync daemon。命令行语法格式为上述"Access via rsync daemon"段的格式。...而方式(3)则是让远程主机上运行rsync服务,使其监听在一个端口上,等待客户端的连接。 由上面可以知道:rsync可以本地,远程同步文件。可以定时,或者时间间隔但是不能实时!...+inotity 就可以做到实时去同步文件了 rsync的安装: yum -y install rsync service rsyncd start 配置文件相关: 省略!!.../configure&&make&&make install 安装过程如果报一下错误: configure: error: in `/tmp/inotify-tools-3.14': configure

    1.9K10

    Linux之rsync数据同步服务

    rsync是一个开源、快速的、多动能的、可以实现全量,增量的本地或远程数据同步备份工具,它适用于多种操作系统平台。...1、rsync的特性(功能) (1)支持拷贝特殊文件(如链接文件、设备文件) (2)拷贝时可以排除目录中目录或文件不需要同步的功能 (3)可以保持源文件或目录的属性不发生改变 (4)可以实现全量、增量的同步功能...、传输效率比较高 (5)可以使用scp、ssh、rsh等方式配合使用 (6)可以通过socke传输方式来同步数据 (7)支持匿名或认证(无需系统用户)的进和模式来进行传输同步数据 2、rsync的工作方式...(1)主机本地的传输,类似于cp功能 (2)借助于SSH服务来传输数据 (3)以守护进程的方式来进行传输数据 [root@localhost1 ~]# rsync --help rsync version...See http://rsync.samba.org/ for updates, bug reports, and answers 3、rsync同步命令格式 (1)本地主机 Local: rsync

    5.1K40

    Linux之rsync数据同步服务

    1.Rsync基本概述 Rsync是开源多功能同步工具,支持多种操作系统 Rsync支持本地复制(优于scp,cp)与远程同步 Rsync支持全量备份,增量备份 Rsync基于C/S架构,默认监听tcp873...安全方式传输,Rsync本身不对数据加密,使用ssh作为传输端口。 指定排除文件,排除无需同步的文件或目录。 进程方式同步,rsync运行在C/S架构,通过进程方式传输文件或数据。....缺点: 1.大量小文件同步会比较慢,需要比对时间较长,可能造成Rsync进程停止 解决思路:将小文件进行打包,然后再同步,减小比对时间,传输效率更高 2.同步大文件会出现中断情况,而且长时间同步会造成网络资源耗尽...解决思路:配置限速同步,未同步完之前修改为隐藏文件,同步完后修改为正常文件 Rsync命令格式: rsync [选项] 源文件 [user@]host::目录 rsync [选项] 源文件 rsync...auth users = admin //执行数据同步的用户名,可设置多个,用英文状态下逗号隔开     hosts allow = 192.168.56.11 //允许进行数据同步的客户端ip,可设置多个

    1.6K20

    Linux文件同步工具之rsync

    通过了解,Linux的同步命令rsync命令可以实现文件同步。这里指的文件同步就是将jenkins工作目录下面的文件同步到我们指定的目录(如我们nginx配置的项目目录)。...并且rsync同步命令具备,高效、带宽消耗低、支持复制链接、设备、属主、属组、权限等。 命令介绍 rsync是远程(或本地)复制和同步文件最常用的命令。...借助rsync命令,你可以跨目录,跨磁盘和跨网络远程与本地数据进行复制和同步。举例来说:在两台Linux主机之间进行数据备份和镜像。...本文介绍在Linux主机上进行远程和本地传输文件的常见用法,不需要root账户也可以允许rsync。 rsync命令特点 1.高效地复制同步数据到对端,或者对端到本地。...而SRC没有的文件 --max-size:限定传输文件大小的上限 --dry-run:显示那些文件将被传输,并不会实际传输 --bwlimit:限制传输带宽 -W:拷贝文件,不进行增量检测 使用案例 本地同步某个文件

    3.5K10

    linux之rsync远程同步文件

    rsync全名Remote Sync,是类unix下数据镜像的备份工具。可以方便的实现本地,远程备份文件,rsync最重要的一点是支持增量备份。 命令语法 rsync [OPTION]......如:rsync -avz foo:src/bar /data 从远程rsync服务器中拷贝文件到本地机。当SRC路径信息包含"::"分隔符时启动该模式。...将jdk.tar.gz拷贝到rumenz目录 > rsync -avhz jdk.tar.gz rumenz 将src目录拷贝到rumenz目录 将/opt/src 目录下的文件同步发送到rumenz...将本地/opt/src/目录下 所有文件同步备份到远程 /opt/rumenz/ 目录 > rsync -avhz /opt/src/ root@rumenz.com:/opt/rumenz/ 将本地.../opt/src/目录同步备份到远程 /opt/rumenz/ 目录 > rsync -avhz /opt/src root@rumenz.com:/opt/rumenz/ 将远程/opt/rumenz

    1.9K10

    Linux下搭建 rsync服务

    times  保持文件时间信息 6、-o,--owner  保持文件属性信息 7、-p,--perms  保持文件权限 8、-g,--group  保持文件属组信息 9、-P,--progress  显示同步的过程及传输时的进度等信息...,在文本下写入一下内容 uid = rsync #用户主(远端的命令要使用rsync访问共享目录) gid = rsync #用户组 use chroot = no #安全相关的 max connections...rsync.rsync /backup/  #改变其的数主、属组关系 六、创建rsync的密码文件,并设置成只有root用户才有权限 touch /etc/rsync.password  #创建 echo...=/etc/rsync.password 方法二:rsync -avz /backup/ rsync://rsync_backup@192.168.11.11/backup/ --password-file...-i :873 方法二:netstat -lntup|grep 873/rsync 关闭进程:pkill rsync 启动虚拟用户:rsync --daemon

    2.1K10

    Ubuntu Linux下用rsync进行数据备份和同步配制

    作为一个管理人员,对数据进行实时地同步备份那是很有必要的。 1. rsync 是一个很好和备份工具,下面以Ubuntu为例讲一下它的配制。 2....打开rsync作为服务器的开关,修改文件/etc/default/rsync的内容其中一行如下(整个文件内容见链接) RSYNC_ENABLE=true 2....新建配制文件/etc/rsyncd.conf 内容如下(或者见链接) #[globale] strict modes = yes  #rsync default port port = 873 logfile...开启备份服务(开户后可用netstat -tupln查看873端口有没有打开,若打开则成功)  sudo /etc/init.d/rsync start 客户端配制 1....OPTIONS="-vazu --progress" 说明: 其中BACKUPPATH为客户端数据存放路径 SERVERIP为服务器A机器的IP地址 MODULE为对应于服务端的/etc/rsyncd.conf下的

    1.1K10

    Linux系统rsync数据同步服务介绍

    Linux系统rsync数据同步服务介绍 rsync是一种开源、快速的、多功能的、可以实现全量、增量的本地或远程数据同步备份工具,它适用于多种操作系统平台 一:rsync的特性(功能 ) 1、支持拷贝特殊文件...6、可以通过socke传输方式来同步数据 7、支持匿名或认证(无需系统用户)的进和模式来进行传输同步数据 二:rsync的工作方式 1、主机本地的传输,类似于cp命令 2、借助于SSH服务来传输数据...3、以守护进程的方式来传输数据 三:rsync同步命令格式 1、本地主机 Local: rsync [OPTION...]...[USER@]HOST:DEST rsync -avzP /etc/hosts -e ''ssh -p 22" root@192.168.1.3:/etc/hosts 将本地的/etc/hosts文件同步到远程主机...将本地的/sever/backup的数据同步到远程主机/data/bbs/ 下, 四:参数介绍 -a 归档递归方式传输(相当于rtopgDl) -v 显示详细模式 -z传输时进行压缩(如同传输图片时进行压缩大小提高传输速度

    1K20

    linux 远程数据同步工具 命令:rsync

    rsync命令是一个远程数据同步工具,可通过LAN/WAN快速同步多台主机间的文件。...rsync使用所谓的“rsync算法”来使本地和远程两个主机之间的文件达到同步,这个算法只传送两个文件的不同部分,而不是每次都整份传送,因此速度相当快。...如:rsync -avz foo:src/bar /data 4、从远程rsync服务器中拷贝文件到本地机。当SRC路径信息包含"::"分隔符时启动该模式。...如:rsync -av /databack root@192.168.78.192::www 6、列远程机的文件列表。这类似于rsync传输,不过只要在命令中省略掉本地机信息即可。...-e, --rsh=command 指定使用rsh、ssh方式进行数据同步。 --rsync-path=PATH 指定远程服务器上的rsync命令所在路径信息。

    1.9K00

    Linux Rsync 增量同步与快速删除

    增量同步 rsync [args] SRC [DEST]情形:同时维护着两份不同的data_center,但以old_data_center为标准。...因为权限的缘故没有开启rsync自动同步,只是每隔一段时间手动同步一下。...SRC和DEST都是采用mount形式,如果每一次都完整地copy,耗时很长,这时候就想到采用增量同步的方法,因为两份data_center同时由不同人维护,所以内容略有不同,data_center同步的时候不光要完全同步...快速删除大量文件 先建一个空目录,随便位置 mkdir /local/empty_dir 用rsync删除目标目录 rsync --delete-before -avH --progress /local...清空时自动保持之前的目录权限,如下: rsync --delete -rlptD /tmp/empty/ /var/spool/postfix/maildrop/ 为什么rsync这么快呢?

    3.1K10
    领券