当前位置:首页 > 文章列表 > 文章 > linux > Linux inotifywait 如何只捕获目录新增文件:事件过滤、递归范围与重复通知

Linux inotifywait 如何只捕获目录新增文件:事件过滤、递归范围与重复通知

来源:17golang原创 2026-08-30 02:43:18 0浏览 收藏

线上导入服务偶尔会多处理同一个文件,查看日志后发现,目录监控脚本把“文件刚创建”和“文件仍在写入”混在了一起。用 inotifywait 只捕获新增文件,关键是把事件过滤收窄到 -e create,再明确是否需要 --recursive;如果要等文件写完,还要单独处理 CLOSE_WRITE。

先用单层目录和 -e create 验证新增事件,再根据子目录需求决定是否加 --recursive;不要把所有事件都交给后续脚本。

实践要点:
  • 监控目录为 /var/app/inbox。
  • -m 负责持续监听,--format 负责稳定输出路径。
  • 新增和写入完成是两种不同的事件。

先把“新增”与“写完”分开

假设导入服务只接收 /var/app/inbox 根目录里的新文件。创建事件表示目录项出现了,但不表示文件内容已经完整。一个上传程序可能先创建空文件,再连续写入,最后关闭文件。如果消费者在第一步就读取,看到的可能只是半截内容。

因此这篇只解决“如何稳定捕获新增目录项”,并把等待写完列为后续选择。先把边界做小,排错时才知道是哪一层放大了事件数量。

输出链路:从 inotifywait 到可处理路径

最小监听命令如下:

inotifywait -m -e create --format '%w%f' /var/app/inbox

inotifywait 读取内核通知,--format 把目录和文件名拼成一行,最终输出落在 /var/app/inbox 这条监控路径下。后续脚本可以按整行读取,避免再猜文件名从哪里来。

inotifywait、--format 与 /var/app/inbox 的目录新增事件数据路径

如果命令输出了 /var/app/inbox/report.csv,这只能证明目录项产生了 create 通知。要判断文件是否能立即读取,仍需结合写入方行为复测。

范围选择:单层监听还是递归监听

不加 --recursive 时,监听范围就是 /var/app/inbox 这一层;文件被放进 /var/app/inbox/2026-08,不会因为父目录被监听而自动变成目标事件。需要覆盖子目录时才加:

inotifywait -m --recursive -e create --format '%w%f' /var/app/inbox

递归监听扩大了目录树,也扩大了事件处理量。值班时先确认业务是否真的把文件分层存放,再决定是否启用它。

-e create、--recursive 与 CLOSE_WRITE 的 Linux inotifywait 事件过滤关系

为什么日志里会出现重复或过早处理

-e create 只筛选创建目录项;如果脚本同时监听了写入、移动和关闭,就可能把一次文件投递拆成多个阶段。尤其是“临时文件写完后改名”的上传方式,真正适合消费的信号可能是目标文件的 CLOSE_WRITE,也可能是一次 moved_to,要看生产方的落盘协议。

这里别急着把所有事件都加进来。先运行最小命令,手动复制一个小文件,再记录命令输出和导入程序读取时刻。若 create 发生后文件仍在增长,就把消费动作延后,或让生产方采用临时名写入、完成后改名的约定。

一组可复查的验证动作

  1. 确认工具存在:运行 command -v inotifywait,记录实际路径。
  2. 在一个终端运行 inotifywait -m -e create --format '%w%f' /var/app/inbox。
  3. 另一个终端执行 cp sample.csv /var/app/inbox/,核对输出是否只出现目标路径。
  4. 若需要子目录,再复制到 /var/app/inbox/2026-08/,比较加不加 --recursive 的差异。
  5. 检查文件大小变化;若 create 输出早于写入结束,消费者不得把 create 当成“内容已完整”。

把命令交给长期运行脚本前的边界

-m 会持续运行,终端中断或服务管理器停止进程后监听才会结束。生产环境应明确 stdout 去向、重启策略和磁盘队列;不要在事件回调里直接假定文件一定存在或一定可读。对大目录树,先评估递归范围和事件速率,再决定是否需要去重队列。

常见问题

只想监听根目录,应该加 --recursive 吗?

不应该。根目录单层监听省掉子目录事件,只有目录层级本身是业务输入时才启用 --recursive。

create 事件能代表文件上传完成吗?

不能。它代表目录项创建;文件仍可能处于写入过程,是否使用 CLOSE_WRITE 或改名完成信号要由落盘方式决定。

总结

把 inotifywait 当作事件入口,而不是完整的文件入库协议:-e create 缩小事件范围,--recursive 决定目录边界,--format 固定传给消费者的路径格式。先在 /var/app/inbox 做一次可复现验证,再接入长期运行脚本,过早消费和重复通知会更容易定位。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Python tarfile 如何安全解压归档:成员路径检查、过滤器与失败清理Python tarfile 如何安全解压归档:成员路径检查、过滤器与失败清理
上一篇
Python tarfile 如何安全解压归档:成员路径检查、过滤器与失败清理
WebGPU 入门如何把计算结果回传页面:GPUBuffer、mapAsync 与设备丢失处理
下一篇
WebGPU 入门如何把计算结果回传页面:GPUBuffer、mapAsync 与设备丢失处理
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    467次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    530次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    549次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    498次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    317次使用