systemd-oomd 怎么配:用 PSI 提前回收高压服务并验证候选 cgroup
一台跑着多个 systemd 服务的 Linux 主机,内存压力上来时最怕两件事:内核直接触发 OOM 杀进程,或者运维只盯着 free -h,直到业务服务连片掉线。systemd-oomd 的思路完全不一样,它读取 cgroup v2 和 PSI(压力 stall 统计信息),在系统还没完全失去响应前,优先处理我们提前标记好的可回收的子服务。
要点速览
ManagedOOMMemoryPressure=kill才会让服务进入 systemd-oomd 的压力处置链。- systemd-oomd 处理的是符合候选条件的后代 cgroup,不是随便一个设置了属性的父服务。
- 启用前要确认统一 cgroup 层级、内存记账、PSI 与 swap 都正常,缺任意一项都可能让实际效果和预期不一样。
oomctl、systemctl show和系统日志要一起核对,要回滚直接清除服务级别的 ManagedOOM 配置就行。
先判断:这次压力场景适合交给 systemd-oomd 吗
systemd-oomd 是用户态的 OOM 处理器,不是给每个服务单独设置 MemoryMax= 的替代品。它用 PSI 观察任务因为内存回收被阻塞延迟的时长,再对照预设的压力阈值挑选候选 cgroup。适合用它的场景,是有明确的低优先级服务、核心业务要优先保活,并且能接受某一个子服务被整体终止的情况。
先把基础条件核对一遍:
stat -fc %T /sys/fs/cgroup
test -r /proc/pressure/memory && cat /proc/pressure/memory
systemctl is-active systemd-oomd
swapon --show
统一层级正常的话通常会显示 cgroup2fs。如果系统没有 PSI 支持,或是完全无 swap 的紧张环境,内存压力上升速度会更快,systemd-oomd 大概率来不及按预期做出响应。
给低优先级服务接上压力处置策略
用 drop-in 配置修改一个可以被回收的服务,比如批处理类的服务 report-worker.service:
sudo systemctl edit report-worker.service
往里面写入下面的配置内容:
[Service]
ManagedOOMMemoryPressure=kill
ManagedOOMMemoryPressureLimit=55%
ManagedOOMMemoryPressureDurationSec=30s
ManagedOOMPreference=avoid
这里的 avoid 不是指这个服务永远不会被杀,只是降低它成为被杀候选的优先级。真正要重点保活的服务,可以保持默认的 auto,并且保证它不在配置为 kill 的父 cgroup 的可杀后代范围内。配置保存后重新加载配置、重启对应服务:
sudo systemctl daemon-reload
sudo systemctl restart report-worker.service
systemctl show report-worker.service \
-p ManagedOOMMemoryPressure \
-p ManagedOOMMemoryPressureLimit \
-p ManagedOOMMemoryPressureDurationUSec

用 oomctl 验收监控对象,不要只盯着配置文件
配置写对了不代表 oomd 已经把这个服务纳入监控范围。先确认服务属性,再站在 oomd 的视角去核对实际监控状态:
systemctl show report-worker.service -p ControlGroup
sudo oomctl dump
sudo journalctl -u systemd-oomd --since "10 min ago"
oomctl dump 里可以直接看到被监控的 cgroup 列表和实时压力数据。日志里记录的候选路径、动作发生时间、服务状态要能完全对应上;如果只看到服务被重启,却找不到 oomd 相关的动作记录,要先排查是不是内核 OOM、服务自身异常退出或者其他 watchdog 触发的动作。
验收的时候建议留存三份核对依据:
| 依据内容 | 对应要确认的问题 |
|---|---|
systemctl show | 服务是不是真的加载了 ManagedOOM 相关属性 |
oomctl dump | oomd 当前实际监控了哪些 cgroup、实时压力数值是多少 |
journalctl -u systemd-oomd | 有没有发生候选选择和终止动作的相关记录 |
误杀与回滚:把服务恢复到默认策略
如果低优先级判定不准确出现了误杀,先关闭服务级别的自定义策略,不要直接删掉整个 unit 文件。重新执行编辑 drop-in 的命令,把里面的 ManagedOOMMemoryPressure、阈值和偏好项全部删掉,然后执行:
sudo systemctl daemon-reload
sudo systemctl restart report-worker.service
systemctl revert report-worker.service
systemctl revert 会直接移除本地所有 drop-in 配置,适合确认完全不需要这组自定义配置的场景下使用。这个操作会删掉该服务的所有本地覆盖文件,执行前建议先用 systemctl cat report-worker.service 把当前配置做一份备份留存。
常见问题
systemd-oomd 会直接杀掉设置了 kill 属性的那个服务吗?
通常不会把设置属性的父 unit 当作第一目标,而是从符合条件的后代 cgroup 里挑选候选,最终的选中范围还受 cgroup 层级和候选资格规则影响。
没有 swap 还能使用 systemd-oomd 吗?
压力监控功能可能还能正常工作,但官方建议还是启用 swap;没有 swap 的场景下压力上升速度会非常快,systemd-oomd 很可能来不及按预期做出响应。
ManagedOOMMemoryPressure=auto 和 kill 有什么区别?
auto 不会主动把该 unit 纳入监控和处置对象;kill 才会让它参与 systemd-oomd 的压力策略规则,同时自动建立对 systemd-oomd 的依赖关系。
这套配置的价值根本不是“提前杀进程”,而是把谁可以被牺牲、用什么压力证据触发、怎么确认动作来源全部写成可审计的服务级策略。可以先在批处理或者缓存类非核心服务上验证效果,没问题之后再逐步扩大适用范围。
Go 中并发运行 HTTP 服务器与后台任务的最佳实践
- 上一篇
- Go 中并发运行 HTTP 服务器与后台任务的最佳实践
- 下一篇
- Go语言中浮点数加法精度误差的根源与专业应对方案
-
- 文章 · linux | 1小时前 | Linux · 故障排查 · 服务管理 · systemd RestartSec StartLimitBurst StartLimitIntervalSec
- systemd 服务频繁重启时怎么设置启动限流
- 426浏览 收藏
-
- 文章 · linux | 7小时前 |
- systemd timer 怎么用 RandomizedDelaySec 错峰执行
- 243浏览 收藏
-
- 文章 · linux | 10小时前 |
- Linux core_pattern 管道处理程序怎么接收崩溃信息
- 132浏览 收藏
-
- 文章 · linux | 12小时前 | Linux io_uring 异步取消 IORING_OP_ASYNC_CANCEL
- Linux io_uring 怎么取消尚未完成的请求
- 395浏览 收藏
-
- 文章 · linux | 14小时前 | Linux · Linux user namespace uid_map
- Linux user namespace 的 uid_map 怎么配置
- 231浏览 收藏
-
- 文章 · linux | 17小时前 | 网络安全 · Linux 防火墙 nftables 动态集合 set timeout gc-interval
- Linux nftables 动态集合怎么设置元素过期时间
- 470浏览 收藏
-
- 文章 · linux | 19小时前 | Linux · 内存管理 · Linux OOM oom_score_adj 进程回收
- Linux oom_score_adj 怎么控制进程被回收优先级
- 306浏览 收藏
-
- 文章 · linux | 1天前 | 进程管理 · Linux cgroup v2 cgroup.freeze cgroup.events cgroup.procs 进程冻结
- Linux cgroup v2 怎么冻结并恢复一组进程
- 467浏览 收藏
-
- 文章 · linux | 1天前 | systemd service ReadWritePaths ProtectSystem 文件系统沙箱 Linux服务加固
- systemd ProtectSystem 与 ReadWritePaths 怎么组合
- 485浏览 收藏
-
- 文章 · linux | 1天前 | Linux · Linux systemd-journald journald.conf RateLimitIntervalSec RateLimitBurst 日志限速
- systemd-journald 日志限速丢弃怎么调整
- 208浏览 收藏
-
- 文章 · linux | 1天前 |
- journalctl 怎么按服务某次 invocation 筛选日志
- 466浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 340次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 397次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 392次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 355次使用
-
- MMBench
- MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
- 181次使用
-
- 详解golang执行Linuxshell命令完整场景下的使用方法
- 2023-01-07 426浏览
-
- go程序部署到linux上运行的实现方法
- 2023-01-02 387浏览
-
- Linux系统下Go语言开发环境搭建
- 2023-01-07 242浏览
-
- 使用golang获取linux上文件的访问/创建/修改时间
- 2022-12-31 238浏览
-
- 在Linux系统中安装Go语言的详细教程
- 2022-12-29 402浏览

