当前位置:首页 > 文章列表 > 文章 > python教程 > Python sys.monitoring 怎么做低开销函数追踪:事件掩码、工具 ID 与回退边界

Python sys.monitoring 怎么做低开销函数追踪:事件掩码、工具 ID 与回退边界

来源:17golang原创 2026-08-25 11:12:34 0浏览 收藏

线上服务里有一段函数偶尔变慢,想临时看调用路径,却不愿意给整个进程打开高密度逐行追踪。Python 3.12 引入的 sys.monitoring 适合处理这种窄范围问题:先占用一个工具 ID,再只打开需要的执行事件,回调里还可以对已经确认无关的代码位置返回 DISABLE

要点速览
  • sys.monitoring 属于 sys 命名空间,正确入口是先 import sys,再访问 sys.monitoring
  • 工具 ID 只能使用 0 到 5,调用 use_tool_id() 后才能注册回调和启用事件;结束时要清理并释放。
  • 事件是按位组合的整数掩码,PY_START 适合看函数进入,PY_RETURN 适合看函数退出,LINE 会产生更密集的回调。
  • 监控 API 从 Python 3.12 开始提供,旧版本必须保留无监控回退路径,不能把缺少 sys.monitoring 当成业务异常。

Python sys.monitoring 使用工具 ID、事件掩码和回调建立函数追踪的工程路径

先把“想看函数”拆成三个选择

第一次接触这个 API 时,最容易把它当成开了就能直接吐出所有函数调用的开关。实际落地要捋清楚三个核心选择:哪个工具ID占住监控槽位、要监听哪些目标事件、回调拿到事件后要记录哪些有效信息。漏了任何一步都拿不到可用的追踪结果。

工具 ID 是协作边界。官方 API 目前允许使用 0 到 5,其中 DEBUGGER_IDCOVERAGE_IDPROFILER_ID 已经有约定用途。临时脚本可以选择一个未占用的 ID,但不能假设某个 ID 永远空闲;use_tool_id() 如果发现冲突会抛出 ValueError

事件则决定回调密度。只想知道函数进入和退出,可以先组合 PY_START | PY_RETURN;想精确到每行才加 LINE。后者产生的回调明显更多,不能作为默认配置。

用最小脚本记录函数进入和返回

下面这段代码只追踪当前进程中 Python 函数的开始和返回。回调签名要按事件类型处理:PY_STARTPY_RETURN 都会带代码对象,返回事件还可能带返回值。

import sys

monitor = getattr(sys, "monitoring", None)
if monitor is None:
    raise RuntimeError("需要 Python 3.12 或更高版本")

tool_id = 3
events = monitor.events

def on_start(code, instruction_offset):
    print("enter", code.co_qualname, code.co_filename)

def on_return(code, instruction_offset, retval):
    print("return", code.co_qualname, repr(retval))

monitor.use_tool_id(tool_id, "local-trace")
try:
    monitor.register_callback(tool_id, events.PY_START, on_start)
    monitor.register_callback(tool_id, events.PY_RETURN, on_return)
    monitor.set_events(tool_id, events.PY_START | events.PY_RETURN)
    # 在这里调用待观察的业务函数
finally:
    monitor.set_events(tool_id, events.NO_EVENTS)
    monitor.free_tool_id(tool_id)

这个示例故意没有把逻辑写进全局导入阶段。实际项目里应该把监控包在一次明确的诊断窗口内,避免测试结束后仍然占用工具 ID。要是业务函数在 try 块中抛错,finally 仍然会执行清理,这是临时诊断脚本必须保留的收口动作。

事件掩码怎么选,取决于证据而不是习惯

sys.monitoring.events 中的事件常量是可以按位或组合的整数。几个常用选择可以这样理解:

事件能拿到的信息最适合的入门场景注意事项
PY_STARTPython 函数开始执行确认调用路径有没有进入目标函数不代表函数一定会执行到后续业务分支
PY_RETURNPython 函数返回观察函数退出时机和返回结果异常退出的情况要单独看对应异常事件
LINE行级执行位置已经锁定目标函数之后做小范围细查回调触发频率很高,整体开销会明显上升
CALL调用发生需要明确区分调用方和被调用方关系时要结合回调返回的参数才能理清完整调用链路

别一上来把 LINEINSTRUCTION 和所有调用事件全打开。先用函数开始/返回确定慢点在哪一层,再把事件范围缩到目标代码对象,通常更容易读懂结果。

全局事件与局部事件不是同一层开关

set_events() 设置的是工具的全局事件;set_local_events() 则可以给某个代码对象增加局部事件。局部事件会叠加到全局事件上,并不会把全局事件屏蔽掉。所以如果全局已经打开 LINE,只对一个函数设置局部 PY_START,并不能把其他函数的逐行事件自动关掉。

要做窄范围诊断,一种更稳的做法是全局只打开很少的事件,或者把全局设为 NO_EVENTS,再针对目标代码对象设置局部事件。示意代码如下:

target_code = target_function.__code__

monitor.set_events(tool_id, events.NO_EVENTS)
monitor.set_local_events(
    tool_id,
    target_code,
    events.PY_START | events.PY_RETURN,
)

try:
    target_function()
finally:
    monitor.set_local_events(tool_id, target_code, events.NO_EVENTS)

代码对象范围适合已知目标函数的实验。若函数会被装饰器替换,先确认拿到的是实际执行的 __code__,否则会出现“回调已经注册但没有输出”的假象。

Python sys.monitoring 从全局事件缩小到局部代码对象并用 DISABLE 降低追踪密度

确认无关位置后,用 DISABLE 停掉后续回调

回调可以返回 sys.monitoring.DISABLE,让当前代码位置的事件停止。它不会改变其他代码位置,也不会替你释放工具 ID,因此适合处理“第一次命中后不需要继续观察”的场景。

seen = set()

def on_line(code, line_number):
    key = (code.co_filename, code.co_firstlineno, line_number)
    if key in seen:
        return monitor.DISABLE
    seen.add(key)
    print("line", code.co_name, line_number)

monitor.register_callback(tool_id, events.LINE, on_line)
monitor.set_events(tool_id, events.LINE)
try:
    run_one_diagnostic_request()
finally:
    monitor.restart_events()
    monitor.set_events(tool_id, events.NO_EVENTS)

这里的 DISABLE 是事件级别的局部停用,不要把它理解成取消整个工具。需要恢复所有被停用的事件时可以调用 restart_events(),但恢复之后仍要在最终清理阶段关闭工具事件。

版本回退和三个常见误判

把它写成独立模块导入

sys.monitoringsys 的命名空间,不能依赖 import sys.monitoring。兼容代码可以通过 getattr(sys, "monitoring", None) 判断能力是否存在,再决定启用监控还是走普通日志/计时路径。

看到回调冲突就强行换 ID

ValueError 说明当前 ID 已经被其他工具使用。先检查约定 ID 和当前进程内的工具协作方式,再选择空闲 ID;更重要的是在退出时调用 free_tool_id(),不要让诊断脚本把槽位长期占住。

只看函数进入就判断函数很慢

PY_START 只能说明进入了函数。要做耗时判断,至少记录开始和返回的时间戳,并把异常退出、阻塞等待和子调用单独区分;监控事件本身不是完整的性能剖析结果。

把选择收敛成一张检查清单

如果目标只是临时确认一条调用路径,先选一个空闲工具 ID,注册 PY_STARTPY_RETURN,把结果写到诊断日志里;只有锁定目标函数后,才考虑 LINE 或局部代码对象事件。每次测试结束都检查事件是否为 NO_EVENTS、工具 ID 是否已经释放,并在 Python 3.11 及更早版本走明确的回退实现。

这套 API 的核心优势是可控:监控覆盖范围、事件触发密度、停用回收时机全部可以由业务脚本自主控制。它没法替代全量的专业性能分析工具,也不会自动定位出业务变慢的根因,但在短时间的局部诊断场景下,完全可以把“代码到底有没有走到这一步”这类纯猜测的问题,变成可以回溯校验的实锤证据。

常见问题

Python 3.11 能直接使用 sys.monitoring 吗?

不能。这个命名空间从 Python 3.12 开始提供。旧版本应当走普通日志、装饰器计时或现有 profiler 的回退路径,不要在运行到一半时才因为属性不存在而中断业务。

为什么已经注册回调,却没有任何输出?

先检查工具 ID 是否已经通过 use_tool_id() 占用,再确认对应事件已经用 set_events()set_local_events() 打开。若只注册回调而没有启用事件,回调不会自动触发。

set_local_events 会覆盖全局事件吗?

不会。局部事件会叠加到全局事件上。想把监控限制在一个代码对象,先把全局事件收窄到 NO_EVENTS,再设置局部事件,并在诊断结束时清理局部配置。

返回 DISABLE 后怎样恢复?

可以调用 restart_events() 恢复被停用的事件,但它不等于释放工具。最终仍要执行 set_events(tool_id, events.NO_EVENTS),并调用 free_tool_id() 归还工具槽位。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Go 自定义 RoundTripper 怎么设计重试:请求体复用、幂等性与错误返回Go 自定义 RoundTripper 怎么设计重试:请求体复用、幂等性与错误返回
上一篇
Go 自定义 RoundTripper 怎么设计重试:请求体复用、幂等性与错误返回
前端弹窗为什么会闪一下:Popover API、初始渲染与关闭动画的边界
下一篇
前端弹窗为什么会闪一下:Popover API、初始渲染与关闭动画的边界
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • ljg-skills -
    ljg-skills
    ljg-skills 是李继刚开源的 AI 技能与提示词集合,面向大模型使用者整理了一批可复用的 prompt、角色设定和任务技能模板,适合用于学习提示词设计、搭建个人 AI 工作流和沉淀团队常用智能体能力。
    5247次使用
  • MELO音乐 - AI 音乐生成平台,支持多模态创作能力
    MELO音乐
    MELO音乐是一站式AI视频与音乐制作助手,对标suno, udio的高品质体验。提供伴奏生成、原创写词、无损导出、哼唱识曲、混音变声等全套音频与短视频编辑工具。无论是流行Kpop、电音说唱、民谣古风、摇滚儿歌还是商用轻音乐,MELO为你免费谱曲,轻松做同款!
    4757次使用
  • UniScribe - AI 免费在线音视频转文字平台
    UniScribe
    UniScribe 是一款 AI 音视频转文字与内容整理工具,支持上传音频、视频文件或粘贴 YouTube 链接,自动生成转写文本、摘要、思维导图和关键问题,并支持多格式导出,适合会议记录、课程学习、访谈整理和内容创作复盘。
    4707次使用
  • 剧云 - 免费 AI 智能中文剧本创作平台
    剧云
    剧云是专业中文剧本创作平台,安全稳定运行十余年,集成AI编剧、剧本医生审核、人物小传、剧情关系图、大纲编写、多人协作、Word导入导出、版权管控功能,数据安全防护,轻松高效创作剧本。
    4959次使用
  • 万象有声 - AI 一站式有声内容创作平台
    万象有声
    万象有声,一个专为有声创作者打造的新一代智能有声内容创作平台。平台提供专业的智能拆章、智能画本编辑、AI配音、AI生成音效、后期制作、智能对轨、智能审听等有声创作全流程工具,可以帮助创作者高效、低成本创作出引人入胜的有声作品。立即体验,让有声书制作更简单!
    4916次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码