当前位置:首页 > 文章列表 > 文章 > linux > Linux rsync 增量同步如何避免临时文件覆盖目标

Linux rsync 增量同步如何避免临时文件覆盖目标

来源:17golang原创 2026-09-12 23:54:38 0浏览 收藏

Linux 上用 rsync 做发布或备份时,最稳妥的思路不是让它直接改写目标文件,而是让未完成的数据先落到临时位置,文件完整后再替换目标。通常应优先使用默认的临时文件机制;需要断点续传时加 --partial-dir=.rsync-partial,一次更新多个文件时再考虑 --delay-updates。临时目录必须和目标文件位于同一文件系统,否则重命名可能退化为复制,短暂暴露半成品的风险仍在。

要点速览
  • --partial-dir 把中断留下的文件放进受控目录,避免半文件直接占用正式文件名。
  • --delay-updates 让多个更新文件在传输结束附近集中放入目标目录,但需要额外磁盘空间。
  • --inplace 会直接改目标文件,和“完成后替换”的目标相反,不能与 --delay-updates 搭配。

rsync 为什么不会直接把半成品写进目标文件

默认更新一个已有文件时,rsync 会在接收端创建临时文件,数据和属性准备完成后再把它移动到正式路径。这个设计让中断通常只留下临时对象,读者看到的目标文件仍是旧版本;真正接近原子替换的前提是临时文件和目标在同一文件系统内。

不要把“增量同步”理解成“目标文件每收到一个块就被改写”。增量算法减少的是网络传输,是否直接修改目标则由传输模式决定。--inplace 明确要求就地更新,硬链接和节省额外空间是它的使用理由,但中断会留下被改过的目标文件。

Linux rsync 源文件、临时文件与目标文件在同一文件系统中完成后替换的结构示意图
图1:rsync 临时文件与完成后替换的结构示意图,临时文件不是实际运行截图。

单次同步怎么用 partial-dir 保留可恢复状态

对大文件、网络不稳定或不希望正式目录出现半成品的任务,可以把临时部分文件集中到目标目录下的隐藏目录:

# 把未完成传输放到目标目录的受控暂存目录
rsync -a --partial-dir=.rsync-partial ./build/ user@example:/srv/app/

# 用演练模式先确认将更新哪些文件,不会写入目标
rsync -an --itemize-changes --partial-dir=.rsync-partial ./build/ /srv/app/

--partial-dir 同时启用保留部分文件的行为;下一次同步可以利用暂存文件继续传输,完成后再放入正式路径。相对路径的 .rsync-partial 会跟随目标目录,权限应限制为同步进程可写,不能随手指定所有用户可写的 /tmp

如果任务中使用了自定义 exclude 规则,要确认暂存目录不会被发送,也不会被清理规则误删。删除策略尤其要谨慎:它应服务于清理过期暂存文件,不能在同步尚未完成时把可恢复数据删掉。

多文件发布时怎么减少混合版本

网页静态资源或一组配置文件一起更新时,即使每个文件都是完成后替换,读请求仍可能在短时间内读到新旧混合版本。此时可使用:

# 将多个更新文件暂存在目标层级,结束时集中放入正式位置
rsync -a --partial-dir=.rsync-partial --delay-updates ./release/ user@example:/srv/app/

# 先检查删除和更新范围;确认无误后再去掉 -n 执行
rsync -an --delete --partial-dir=.rsync-partial --delay-updates ./release/ /srv/app/

--delay-updates 会把更新文件放入等待目录,在传输结束时快速移动到目标位置。它需要完整文件列表,可能增加接收端内存和磁盘占用;如果接收端无法容纳一份额外的更新文件副本,就不要为了“看起来原子”强行打开它。

场景优先考虑注意事项
单个大文件,允许续传--partial-dir暂存目录和目标保持同文件系统
多文件一次发布--partial-dir + --delay-updates预留额外空间,接受更高内存需求
硬链接或空间极紧谨慎评估 --inplace中断可能直接破坏目标内容,不能配 --delay-updates
指定外部临时目录仅在同文件系统且权限受控时使用跨文件系统会把重命名退化为复制
Linux rsync partial-dir、delay-updates、inplace 和跨文件系统临时目录的配置取舍关系图
图2:rsync 发布参数取舍与文件状态关系示意图,不代表实际命令输出。

上线前检查哪些文件系统和恢复边界

先确认目标挂载点和暂存目录属于同一文件系统,再检查空间、权限和清理策略。可以用下面的命令查看设备边界:

# 分别查看目标目录和暂存目录所在的文件系统
df -P /srv/app /srv/app/.rsync-partial

# 检查暂存目录权限,避免被其他用户写入
stat -c '%A %U:%G %n' /srv/app/.rsync-partial

如果必须使用独立挂载点的 --temp-dir,不能再把它当作“完成后原子替换”的保证:官方说明中,跨文件系统的 rename 无法直接完成,rsync 只能复制到目标。生产发布还应把目标目录的读取方、磁盘水位和失败后的重试动作写进运维流程。

常见问题

只加 --partial 就能避免覆盖目标吗?

不能把它当作完整隔离方案。--partial 主要是保留中断文件;需要把半成品放在独立目录时,应明确使用 --partial-dir

为什么 --inplace 和 --delay-updates 不能一起用?

前者要求直接写目标,后者要求先暂存再集中放置,二者对文件落点的要求相反,所以 rsync 将它们视为冲突选项。

把暂存目录放到 /tmp 是否更安全?

不一定。除了可能跨文件系统,所有用户可写的临时目录还会扩大篡改和撞名风险。优先使用目标目录下权限受控的相对 --partial-dir

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Lovart作品交给客户后还能改吗?PPTX、PSD与HTML可编辑性测试方法Lovart作品交给客户后还能改吗?PPTX、PSD与HTML可编辑性测试方法
上一篇
Lovart作品交给客户后还能改吗?PPTX、PSD与HTML可编辑性测试方法
Go log.Fatal 放在库代码里为什么会终止宿主程序
下一篇
Go log.Fatal 放在库代码里为什么会终止宿主程序
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    108次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    23次使用
  • OpenCompass大模型评测体系详解:功能、使用指南与应用场景
    OpenCompass
    OpenCompass是上海AI实验室推出的开源大模型评测平台,提供CompassKit、CompassHub和CompassRank三大核心组件,支持LLM及多模态模型的一站式标准化评估与排行榜查询。
    41次使用
  • AGI-Eval大模型评测平台:权威榜单、数据集与人机协同评测方案
    AGI-Eval
    AGI-Eval是由上海交大等高校联合发布的大模型评测社区,提供公正透明的LLM能力榜单、多领域评测集及Data Studio数据服务,助力AI模型性能评估与NLP科研开发。
    23次使用
  • SuperCLUE中文大模型评测基准:功能、能力维度与应用指南
    SuperCLUE
    SuperCLUE是权威的中文大语言模型综合评测基准,涵盖语言理解、知识应用、AI Agent智能体及安全性等12项核心能力。通过多轮对话与客观测试,定期发布榜单与技术报告,为模型研发、优化及行业选型提供科学依据。
    264次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码