Python sys.monitoring 怎么做低开销函数追踪:事件掩码、工具 ID 与回退边界
线上服务里有一段函数偶尔变慢,想临时看调用路径,却不愿意给整个进程打开高密度逐行追踪。Python 3.12 引入的 sys.monitoring 适合处理这种窄范围问题:先占用一个工具 ID,再只打开需要的执行事件,回调里还可以对已经确认无关的代码位置返回 DISABLE。
sys.monitoring属于sys命名空间,正确入口是先import sys,再访问sys.monitoring。- 工具 ID 只能使用 0 到 5,调用
use_tool_id()后才能注册回调和启用事件;结束时要清理并释放。 - 事件是按位组合的整数掩码,
PY_START适合看函数进入,PY_RETURN适合看函数退出,LINE会产生更密集的回调。 - 监控 API 从 Python 3.12 开始提供,旧版本必须保留无监控回退路径,不能把缺少
sys.monitoring当成业务异常。

先把“想看函数”拆成三个选择
第一次接触这个 API 时,最容易把它当成开了就能直接吐出所有函数调用的开关。实际落地要捋清楚三个核心选择:哪个工具ID占住监控槽位、要监听哪些目标事件、回调拿到事件后要记录哪些有效信息。漏了任何一步都拿不到可用的追踪结果。
工具 ID 是协作边界。官方 API 目前允许使用 0 到 5,其中 DEBUGGER_ID、COVERAGE_ID 和 PROFILER_ID 已经有约定用途。临时脚本可以选择一个未占用的 ID,但不能假设某个 ID 永远空闲;use_tool_id() 如果发现冲突会抛出 ValueError。
事件则决定回调密度。只想知道函数进入和退出,可以先组合 PY_START | PY_RETURN;想精确到每行才加 LINE。后者产生的回调明显更多,不能作为默认配置。
用最小脚本记录函数进入和返回
下面这段代码只追踪当前进程中 Python 函数的开始和返回。回调签名要按事件类型处理:PY_START 与 PY_RETURN 都会带代码对象,返回事件还可能带返回值。
import sys
monitor = getattr(sys, "monitoring", None)
if monitor is None:
raise RuntimeError("需要 Python 3.12 或更高版本")
tool_id = 3
events = monitor.events
def on_start(code, instruction_offset):
print("enter", code.co_qualname, code.co_filename)
def on_return(code, instruction_offset, retval):
print("return", code.co_qualname, repr(retval))
monitor.use_tool_id(tool_id, "local-trace")
try:
monitor.register_callback(tool_id, events.PY_START, on_start)
monitor.register_callback(tool_id, events.PY_RETURN, on_return)
monitor.set_events(tool_id, events.PY_START | events.PY_RETURN)
# 在这里调用待观察的业务函数
finally:
monitor.set_events(tool_id, events.NO_EVENTS)
monitor.free_tool_id(tool_id)
这个示例故意没有把逻辑写进全局导入阶段。实际项目里应该把监控包在一次明确的诊断窗口内,避免测试结束后仍然占用工具 ID。要是业务函数在 try 块中抛错,finally 仍然会执行清理,这是临时诊断脚本必须保留的收口动作。
事件掩码怎么选,取决于证据而不是习惯
sys.monitoring.events 中的事件常量是可以按位或组合的整数。几个常用选择可以这样理解:
| 事件 | 能拿到的信息 | 最适合的入门场景 | 注意事项 |
|---|---|---|---|
PY_START | Python 函数开始执行 | 确认调用路径有没有进入目标函数 | 不代表函数一定会执行到后续业务分支 |
PY_RETURN | Python 函数返回 | 观察函数退出时机和返回结果 | 异常退出的情况要单独看对应异常事件 |
LINE | 行级执行位置 | 已经锁定目标函数之后做小范围细查 | 回调触发频率很高,整体开销会明显上升 |
CALL | 调用发生 | 需要明确区分调用方和被调用方关系时 | 要结合回调返回的参数才能理清完整调用链路 |
别一上来把 LINE、INSTRUCTION 和所有调用事件全打开。先用函数开始/返回确定慢点在哪一层,再把事件范围缩到目标代码对象,通常更容易读懂结果。
全局事件与局部事件不是同一层开关
set_events() 设置的是工具的全局事件;set_local_events() 则可以给某个代码对象增加局部事件。局部事件会叠加到全局事件上,并不会把全局事件屏蔽掉。所以如果全局已经打开 LINE,只对一个函数设置局部 PY_START,并不能把其他函数的逐行事件自动关掉。
要做窄范围诊断,一种更稳的做法是全局只打开很少的事件,或者把全局设为 NO_EVENTS,再针对目标代码对象设置局部事件。示意代码如下:
target_code = target_function.__code__
monitor.set_events(tool_id, events.NO_EVENTS)
monitor.set_local_events(
tool_id,
target_code,
events.PY_START | events.PY_RETURN,
)
try:
target_function()
finally:
monitor.set_local_events(tool_id, target_code, events.NO_EVENTS)
代码对象范围适合已知目标函数的实验。若函数会被装饰器替换,先确认拿到的是实际执行的 __code__,否则会出现“回调已经注册但没有输出”的假象。

确认无关位置后,用 DISABLE 停掉后续回调
回调可以返回 sys.monitoring.DISABLE,让当前代码位置的事件停止。它不会改变其他代码位置,也不会替你释放工具 ID,因此适合处理“第一次命中后不需要继续观察”的场景。
seen = set()
def on_line(code, line_number):
key = (code.co_filename, code.co_firstlineno, line_number)
if key in seen:
return monitor.DISABLE
seen.add(key)
print("line", code.co_name, line_number)
monitor.register_callback(tool_id, events.LINE, on_line)
monitor.set_events(tool_id, events.LINE)
try:
run_one_diagnostic_request()
finally:
monitor.restart_events()
monitor.set_events(tool_id, events.NO_EVENTS)
这里的 DISABLE 是事件级别的局部停用,不要把它理解成取消整个工具。需要恢复所有被停用的事件时可以调用 restart_events(),但恢复之后仍要在最终清理阶段关闭工具事件。
版本回退和三个常见误判
把它写成独立模块导入
sys.monitoring 是 sys 的命名空间,不能依赖 import sys.monitoring。兼容代码可以通过 getattr(sys, "monitoring", None) 判断能力是否存在,再决定启用监控还是走普通日志/计时路径。
看到回调冲突就强行换 ID
ValueError 说明当前 ID 已经被其他工具使用。先检查约定 ID 和当前进程内的工具协作方式,再选择空闲 ID;更重要的是在退出时调用 free_tool_id(),不要让诊断脚本把槽位长期占住。
只看函数进入就判断函数很慢
PY_START 只能说明进入了函数。要做耗时判断,至少记录开始和返回的时间戳,并把异常退出、阻塞等待和子调用单独区分;监控事件本身不是完整的性能剖析结果。
把选择收敛成一张检查清单
如果目标只是临时确认一条调用路径,先选一个空闲工具 ID,注册 PY_START 和 PY_RETURN,把结果写到诊断日志里;只有锁定目标函数后,才考虑 LINE 或局部代码对象事件。每次测试结束都检查事件是否为 NO_EVENTS、工具 ID 是否已经释放,并在 Python 3.11 及更早版本走明确的回退实现。
这套 API 的核心优势是可控:监控覆盖范围、事件触发密度、停用回收时机全部可以由业务脚本自主控制。它没法替代全量的专业性能分析工具,也不会自动定位出业务变慢的根因,但在短时间的局部诊断场景下,完全可以把“代码到底有没有走到这一步”这类纯猜测的问题,变成可以回溯校验的实锤证据。
常见问题
Python 3.11 能直接使用 sys.monitoring 吗?
不能。这个命名空间从 Python 3.12 开始提供。旧版本应当走普通日志、装饰器计时或现有 profiler 的回退路径,不要在运行到一半时才因为属性不存在而中断业务。
为什么已经注册回调,却没有任何输出?
先检查工具 ID 是否已经通过 use_tool_id() 占用,再确认对应事件已经用 set_events() 或 set_local_events() 打开。若只注册回调而没有启用事件,回调不会自动触发。
set_local_events 会覆盖全局事件吗?
不会。局部事件会叠加到全局事件上。想把监控限制在一个代码对象,先把全局事件收窄到 NO_EVENTS,再设置局部事件,并在诊断结束时清理局部配置。
返回 DISABLE 后怎样恢复?
可以调用 restart_events() 恢复被停用的事件,但它不等于释放工具。最终仍要执行 set_events(tool_id, events.NO_EVENTS),并调用 free_tool_id() 归还工具槽位。
Go 自定义 RoundTripper 怎么设计重试:请求体复用、幂等性与错误返回
- 上一篇
- Go 自定义 RoundTripper 怎么设计重试:请求体复用、幂等性与错误返回
- 下一篇
- 前端弹窗为什么会闪一下:Popover API、初始渲染与关闭动画的边界
-
- 文章 · python教程 | 4小时前 | Python教程 · 静态类型检查 异步方法 Python Protocol 结构类型 Awaitable
- Python Protocol 怎样描述带异步方法的结构类型
- 363浏览 收藏
-
- 文章 · python教程 | 6小时前 | Python教程 · InitVar __post_init__ Python dataclasses.replace 数据类复制
- Python dataclasses.replace 遇到 InitVar 时怎样传递参数
- 381浏览 收藏
-
- 文章 · python教程 | 8小时前 | python · pathlib ·
- Python importlib.resources.as_file 的临时路径何时失效
- 318浏览 收藏
-
- 文章 · python教程 | 10小时前 | SQLite · Python教程 · Python sqlite3 Connection.backup 进度回调 SQLite备份
- Python sqlite3 备份进度回调怎样判断剩余页数
- 264浏览 收藏
-
- 文章 · python教程 | 13小时前 | python · 内存优化 · Python教程 · 文件读取 大文件处理 Python mmap 分段映射 ALLOCATIONGRANULARITY
- Python mmap 怎样分段处理超过内存的大文件
- 146浏览 收藏
-
- 文章 · python教程 | 15小时前 | python · Python 二进制协议 零拷贝 memoryview
- Python memoryview 如何零拷贝切片二进制协议数据
- 225浏览 收藏
-
- 文章 · python教程 | 17小时前 | 并发控制 · Python教程 · asyncio · 虚假唤醒 wait_for Python asyncio asyncio.Condition 异步同步
- Python asyncio.Condition.wait_for 如何处理虚假唤醒
- 478浏览 收藏
-
- 文章 · python教程 | 19小时前 |
- Python ExceptionGroup 派生新组时如何保留异常元数据
- 417浏览 收藏
-
- 文章 · python教程 | 20小时前 | 异常处理 · 并发编程 · Python教程 · asyncio · asyncio 结构化并发 ExceptionGroup except* Python TaskGroup
- Python TaskGroup 如何汇总多个子任务异常
- 208浏览 收藏
-
- 文章 · python教程 | 1天前 | 并发编程 · 工程实践 · Python教程 · 多进程日志 QueueListener multiprocessing.Queue RotatingFileHandler Python QueueHandler
- Python 日志 QueueHandler 解决多进程写入争用
- 186浏览 收藏
-
- 文章 · python教程 | 1天前 | 数据校验 · python · Pydantic 部分更新 exclude_unset model_fields_set 显式空值 model_dump
- Pydantic 模型更新时区分未提供字段与显式空值
- 399浏览 收藏
-
- 文章 · python教程 | 1天前 |
- pytest Fixture 作用域如何影响测试隔离与速度
- 341浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 395次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 473次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 479次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 423次使用
-
- MMBench
- MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
- 249次使用
-
- go-spew调试利器详解
- 2023-01-07 282浏览
-
- golang 对象深拷贝的常见方式及性能
- 2022-12-28 262浏览
-
- Go标准库http与fasthttp服务端性能对比场景分析
- 2022-12-31 206浏览
-
- Goland 断点调试Debug的操作
- 2022-12-29 271浏览
-
- go格式“占位符”输入输出 类似python的input
- 2023-01-19 346浏览

