当前位置:首页 > 文章列表 > 文章 > python教程 > Python sys.monitoring 怎么做低开销函数追踪:事件掩码、工具 ID 与回退边界

Python sys.monitoring 怎么做低开销函数追踪:事件掩码、工具 ID 与回退边界

来源:17golang原创 2026-08-25 11:12:34 0浏览 收藏

线上服务里有一段函数偶尔变慢,想临时看调用路径,却不愿意给整个进程打开高密度逐行追踪。Python 3.12 引入的 sys.monitoring 适合处理这种窄范围问题:先占用一个工具 ID,再只打开需要的执行事件,回调里还可以对已经确认无关的代码位置返回 DISABLE。

要点速览
  • sys.monitoring 属于 sys 命名空间,正确入口是先 import sys,再访问 sys.monitoring。
  • 工具 ID 只能使用 0 到 5,调用 use_tool_id() 后才能注册回调和启用事件;结束时要清理并释放。
  • 事件是按位组合的整数掩码,PY_START 适合看函数进入,PY_RETURN 适合看函数退出,LINE 会产生更密集的回调。
  • 监控 API 从 Python 3.12 开始提供,旧版本必须保留无监控回退路径,不能把缺少 sys.monitoring 当成业务异常。

Python sys.monitoring 使用工具 ID、事件掩码和回调建立函数追踪的工程路径

先把“想看函数”拆成三个选择

第一次接触这个 API 时,最容易把它当成开了就能直接吐出所有函数调用的开关。实际落地要捋清楚三个核心选择:哪个工具ID占住监控槽位、要监听哪些目标事件、回调拿到事件后要记录哪些有效信息。漏了任何一步都拿不到可用的追踪结果。

工具 ID 是协作边界。官方 API 目前允许使用 0 到 5,其中 DEBUGGER_ID、COVERAGE_ID 和 PROFILER_ID 已经有约定用途。临时脚本可以选择一个未占用的 ID,但不能假设某个 ID 永远空闲;use_tool_id() 如果发现冲突会抛出 ValueError。

事件则决定回调密度。只想知道函数进入和退出,可以先组合 PY_START | PY_RETURN;想精确到每行才加 LINE。后者产生的回调明显更多,不能作为默认配置。

用最小脚本记录函数进入和返回

下面这段代码只追踪当前进程中 Python 函数的开始和返回。回调签名要按事件类型处理:PY_START 与 PY_RETURN 都会带代码对象,返回事件还可能带返回值。

import sys

monitor = getattr(sys, "monitoring", None)
if monitor is None:
    raise RuntimeError("需要 Python 3.12 或更高版本")

tool_id = 3
events = monitor.events

def on_start(code, instruction_offset):
    print("enter", code.co_qualname, code.co_filename)

def on_return(code, instruction_offset, retval):
    print("return", code.co_qualname, repr(retval))

monitor.use_tool_id(tool_id, "local-trace")
try:
    monitor.register_callback(tool_id, events.PY_START, on_start)
    monitor.register_callback(tool_id, events.PY_RETURN, on_return)
    monitor.set_events(tool_id, events.PY_START | events.PY_RETURN)
    # 在这里调用待观察的业务函数
finally:
    monitor.set_events(tool_id, events.NO_EVENTS)
    monitor.free_tool_id(tool_id)

这个示例故意没有把逻辑写进全局导入阶段。实际项目里应该把监控包在一次明确的诊断窗口内,避免测试结束后仍然占用工具 ID。要是业务函数在 try 块中抛错,finally 仍然会执行清理,这是临时诊断脚本必须保留的收口动作。

事件掩码怎么选,取决于证据而不是习惯

sys.monitoring.events 中的事件常量是可以按位或组合的整数。几个常用选择可以这样理解:

事件能拿到的信息最适合的入门场景注意事项
PY_STARTPython 函数开始执行确认调用路径有没有进入目标函数不代表函数一定会执行到后续业务分支
PY_RETURNPython 函数返回观察函数退出时机和返回结果异常退出的情况要单独看对应异常事件
LINE行级执行位置已经锁定目标函数之后做小范围细查回调触发频率很高,整体开销会明显上升
CALL调用发生需要明确区分调用方和被调用方关系时要结合回调返回的参数才能理清完整调用链路

别一上来把 LINE、INSTRUCTION 和所有调用事件全打开。先用函数开始/返回确定慢点在哪一层,再把事件范围缩到目标代码对象,通常更容易读懂结果。

全局事件与局部事件不是同一层开关

set_events() 设置的是工具的全局事件;set_local_events() 则可以给某个代码对象增加局部事件。局部事件会叠加到全局事件上,并不会把全局事件屏蔽掉。所以如果全局已经打开 LINE,只对一个函数设置局部 PY_START,并不能把其他函数的逐行事件自动关掉。

要做窄范围诊断,一种更稳的做法是全局只打开很少的事件,或者把全局设为 NO_EVENTS,再针对目标代码对象设置局部事件。示意代码如下:

target_code = target_function.__code__

monitor.set_events(tool_id, events.NO_EVENTS)
monitor.set_local_events(
    tool_id,
    target_code,
    events.PY_START | events.PY_RETURN,
)

try:
    target_function()
finally:
    monitor.set_local_events(tool_id, target_code, events.NO_EVENTS)

代码对象范围适合已知目标函数的实验。若函数会被装饰器替换,先确认拿到的是实际执行的 __code__,否则会出现“回调已经注册但没有输出”的假象。

Python sys.monitoring 从全局事件缩小到局部代码对象并用 DISABLE 降低追踪密度

确认无关位置后,用 DISABLE 停掉后续回调

回调可以返回 sys.monitoring.DISABLE,让当前代码位置的事件停止。它不会改变其他代码位置,也不会替你释放工具 ID,因此适合处理“第一次命中后不需要继续观察”的场景。

seen = set()

def on_line(code, line_number):
    key = (code.co_filename, code.co_firstlineno, line_number)
    if key in seen:
        return monitor.DISABLE
    seen.add(key)
    print("line", code.co_name, line_number)

monitor.register_callback(tool_id, events.LINE, on_line)
monitor.set_events(tool_id, events.LINE)
try:
    run_one_diagnostic_request()
finally:
    monitor.restart_events()
    monitor.set_events(tool_id, events.NO_EVENTS)

这里的 DISABLE 是事件级别的局部停用,不要把它理解成取消整个工具。需要恢复所有被停用的事件时可以调用 restart_events(),但恢复之后仍要在最终清理阶段关闭工具事件。

版本回退和三个常见误判

把它写成独立模块导入

sys.monitoring 是 sys 的命名空间,不能依赖 import sys.monitoring。兼容代码可以通过 getattr(sys, "monitoring", None) 判断能力是否存在,再决定启用监控还是走普通日志/计时路径。

看到回调冲突就强行换 ID

ValueError 说明当前 ID 已经被其他工具使用。先检查约定 ID 和当前进程内的工具协作方式,再选择空闲 ID;更重要的是在退出时调用 free_tool_id(),不要让诊断脚本把槽位长期占住。

只看函数进入就判断函数很慢

PY_START 只能说明进入了函数。要做耗时判断,至少记录开始和返回的时间戳,并把异常退出、阻塞等待和子调用单独区分;监控事件本身不是完整的性能剖析结果。

把选择收敛成一张检查清单

如果目标只是临时确认一条调用路径,先选一个空闲工具 ID,注册 PY_START 和 PY_RETURN,把结果写到诊断日志里;只有锁定目标函数后,才考虑 LINE 或局部代码对象事件。每次测试结束都检查事件是否为 NO_EVENTS、工具 ID 是否已经释放,并在 Python 3.11 及更早版本走明确的回退实现。

这套 API 的核心优势是可控:监控覆盖范围、事件触发密度、停用回收时机全部可以由业务脚本自主控制。它没法替代全量的专业性能分析工具,也不会自动定位出业务变慢的根因,但在短时间的局部诊断场景下,完全可以把“代码到底有没有走到这一步”这类纯猜测的问题,变成可以回溯校验的实锤证据。

常见问题

Python 3.11 能直接使用 sys.monitoring 吗?

不能。这个命名空间从 Python 3.12 开始提供。旧版本应当走普通日志、装饰器计时或现有 profiler 的回退路径,不要在运行到一半时才因为属性不存在而中断业务。

为什么已经注册回调,却没有任何输出?

先检查工具 ID 是否已经通过 use_tool_id() 占用,再确认对应事件已经用 set_events() 或 set_local_events() 打开。若只注册回调而没有启用事件,回调不会自动触发。

set_local_events 会覆盖全局事件吗?

不会。局部事件会叠加到全局事件上。想把监控限制在一个代码对象,先把全局事件收窄到 NO_EVENTS,再设置局部事件,并在诊断结束时清理局部配置。

返回 DISABLE 后怎样恢复?

可以调用 restart_events() 恢复被停用的事件,但它不等于释放工具。最终仍要执行 set_events(tool_id, events.NO_EVENTS),并调用 free_tool_id() 归还工具槽位。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Go 自定义 RoundTripper 怎么设计重试:请求体复用、幂等性与错误返回Go 自定义 RoundTripper 怎么设计重试:请求体复用、幂等性与错误返回
上一篇
Go 自定义 RoundTripper 怎么设计重试:请求体复用、幂等性与错误返回
前端弹窗为什么会闪一下:Popover API、初始渲染与关闭动画的边界
下一篇
前端弹窗为什么会闪一下:Popover API、初始渲染与关闭动画的边界
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    395次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    473次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    479次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    423次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    249次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码