Python sys.monitoring 怎么做低开销函数追踪:事件掩码、工具 ID 与回退边界
来源:17golang原创
时间:2026-08-25 11:12:34 386浏览 收藏
线上服务里有一段函数偶尔变慢,想临时看调用路径,却不愿意给整个进程打开高密度逐行追踪。Python 3.12 引入的 sys.monitoring 适合处理这种窄范围问题:先占用一个工具 ID,再只打开需要的执行事件,回调里还可以对已经确认无关的代码位置返回 DISABLE。
sys.monitoring属于sys命名空间,正确入口是先import sys,再访问sys.monitoring。- 工具 ID 只能使用 0 到 5,调用
use_tool_id()后才能注册回调和启用事件;结束时要清理并释放。 - 事件是按位组合的整数掩码,
PY_START适合看函数进入,PY_RETURN适合看函数退出,LINE会产生更密集的回调。 - 监控 API 从 Python 3.12 开始提供,旧版本必须保留无监控回退路径,不能把缺少
sys.monitoring当成业务异常。

先把“想看函数”拆成三个选择
第一次接触这个 API 时,最容易把它当成开了就能直接吐出所有函数调用的开关。实际落地要捋清楚三个核心选择:哪个工具ID占住监控槽位、要监听哪些目标事件、回调拿到事件后要记录哪些有效信息。漏了任何一步都拿不到可用的追踪结果。
工具 ID 是协作边界。官方 API 目前允许使用 0 到 5,其中 DEBUGGER_ID、COVERAGE_ID 和 PROFILER_ID 已经有约定用途。临时脚本可以选择一个未占用的 ID,但不能假设某个 ID 永远空闲;use_tool_id() 如果发现冲突会抛出 ValueError。
事件则决定回调密度。只想知道函数进入和退出,可以先组合 PY_START | PY_RETURN;想精确到每行才加 LINE。后者产生的回调明显更多,不能作为默认配置。
用最小脚本记录函数进入和返回
下面这段代码只追踪当前进程中 Python 函数的开始和返回。回调签名要按事件类型处理:PY_START 与 PY_RETURN 都会带代码对象,返回事件还可能带返回值。
import sys
monitor = getattr(sys, "monitoring", None)
if monitor is None:
raise RuntimeError("需要 Python 3.12 或更高版本")
tool_id = 3
events = monitor.events
def on_start(code, instruction_offset):
print("enter", code.co_qualname, code.co_filename)
def on_return(code, instruction_offset, retval):
print("return", code.co_qualname, repr(retval))
monitor.use_tool_id(tool_id, "local-trace")
try:
monitor.register_callback(tool_id, events.PY_START, on_start)
monitor.register_callback(tool_id, events.PY_RETURN, on_return)
monitor.set_events(tool_id, events.PY_START | events.PY_RETURN)
# 在这里调用待观察的业务函数
finally:
monitor.set_events(tool_id, events.NO_EVENTS)
monitor.free_tool_id(tool_id)
这个示例故意没有把逻辑写进全局导入阶段。实际项目里应该把监控包在一次明确的诊断窗口内,避免测试结束后仍然占用工具 ID。要是业务函数在 try 块中抛错,finally 仍然会执行清理,这是临时诊断脚本必须保留的收口动作。
事件掩码怎么选,取决于证据而不是习惯
sys.monitoring.events 中的事件常量是可以按位或组合的整数。几个常用选择可以这样理解:
| 事件 | 能拿到的信息 | 最适合的入门场景 | 注意事项 |
|---|---|---|---|
PY_START | Python 函数开始执行 | 确认调用路径有没有进入目标函数 | 不代表函数一定会执行到后续业务分支 |
PY_RETURN | Python 函数返回 | 观察函数退出时机和返回结果 | 异常退出的情况要单独看对应异常事件 |
LINE | 行级执行位置 | 已经锁定目标函数之后做小范围细查 | 回调触发频率很高,整体开销会明显上升 |
CALL | 调用发生 | 需要明确区分调用方和被调用方关系时 | 要结合回调返回的参数才能理清完整调用链路 |
别一上来把 LINE、INSTRUCTION 和所有调用事件全打开。先用函数开始/返回确定慢点在哪一层,再把事件范围缩到目标代码对象,通常更容易读懂结果。
全局事件与局部事件不是同一层开关
set_events() 设置的是工具的全局事件;set_local_events() 则可以给某个代码对象增加局部事件。局部事件会叠加到全局事件上,并不会把全局事件屏蔽掉。所以如果全局已经打开 LINE,只对一个函数设置局部 PY_START,并不能把其他函数的逐行事件自动关掉。
要做窄范围诊断,一种更稳的做法是全局只打开很少的事件,或者把全局设为 NO_EVENTS,再针对目标代码对象设置局部事件。示意代码如下:
target_code = target_function.__code__
monitor.set_events(tool_id, events.NO_EVENTS)
monitor.set_local_events(
tool_id,
target_code,
events.PY_START | events.PY_RETURN,
)
try:
target_function()
finally:
monitor.set_local_events(tool_id, target_code, events.NO_EVENTS)
代码对象范围适合已知目标函数的实验。若函数会被装饰器替换,先确认拿到的是实际执行的 __code__,否则会出现“回调已经注册但没有输出”的假象。

确认无关位置后,用 DISABLE 停掉后续回调
回调可以返回 sys.monitoring.DISABLE,让当前代码位置的事件停止。它不会改变其他代码位置,也不会替你释放工具 ID,因此适合处理“第一次命中后不需要继续观察”的场景。
seen = set()
def on_line(code, line_number):
key = (code.co_filename, code.co_firstlineno, line_number)
if key in seen:
return monitor.DISABLE
seen.add(key)
print("line", code.co_name, line_number)
monitor.register_callback(tool_id, events.LINE, on_line)
monitor.set_events(tool_id, events.LINE)
try:
run_one_diagnostic_request()
finally:
monitor.restart_events()
monitor.set_events(tool_id, events.NO_EVENTS)
这里的 DISABLE 是事件级别的局部停用,不要把它理解成取消整个工具。需要恢复所有被停用的事件时可以调用 restart_events(),但恢复之后仍要在最终清理阶段关闭工具事件。
版本回退和三个常见误判
把它写成独立模块导入
sys.monitoring 是 sys 的命名空间,不能依赖 import sys.monitoring。兼容代码可以通过 getattr(sys, "monitoring", None) 判断能力是否存在,再决定启用监控还是走普通日志/计时路径。
看到回调冲突就强行换 ID
ValueError 说明当前 ID 已经被其他工具使用。先检查约定 ID 和当前进程内的工具协作方式,再选择空闲 ID;更重要的是在退出时调用 free_tool_id(),不要让诊断脚本把槽位长期占住。
只看函数进入就判断函数很慢
PY_START 只能说明进入了函数。要做耗时判断,至少记录开始和返回的时间戳,并把异常退出、阻塞等待和子调用单独区分;监控事件本身不是完整的性能剖析结果。
把选择收敛成一张检查清单
如果目标只是临时确认一条调用路径,先选一个空闲工具 ID,注册 PY_START 和 PY_RETURN,把结果写到诊断日志里;只有锁定目标函数后,才考虑 LINE 或局部代码对象事件。每次测试结束都检查事件是否为 NO_EVENTS、工具 ID 是否已经释放,并在 Python 3.11 及更早版本走明确的回退实现。
这套 API 的核心优势是可控:监控覆盖范围、事件触发密度、停用回收时机全部可以由业务脚本自主控制。它没法替代全量的专业性能分析工具,也不会自动定位出业务变慢的根因,但在短时间的局部诊断场景下,完全可以把“代码到底有没有走到这一步”这类纯猜测的问题,变成可以回溯校验的实锤证据。
常见问题
Python 3.11 能直接使用 sys.monitoring 吗?
不能。这个命名空间从 Python 3.12 开始提供。旧版本应当走普通日志、装饰器计时或现有 profiler 的回退路径,不要在运行到一半时才因为属性不存在而中断业务。
为什么已经注册回调,却没有任何输出?
先检查工具 ID 是否已经通过 use_tool_id() 占用,再确认对应事件已经用 set_events() 或 set_local_events() 打开。若只注册回调而没有启用事件,回调不会自动触发。
set_local_events 会覆盖全局事件吗?
不会。局部事件会叠加到全局事件上。想把监控限制在一个代码对象,先把全局事件收窄到 NO_EVENTS,再设置局部事件,并在诊断结束时清理局部配置。
返回 DISABLE 后怎样恢复?
可以调用 restart_events() 恢复被停用的事件,但它不等于释放工具。最终仍要执行 set_events(tool_id, events.NO_EVENTS),并调用 free_tool_id() 归还工具槽位。
-
282 收藏
-
262 收藏
-
206 收藏
-
271 收藏
-
346 收藏
-
345 收藏
-
文章 · python教程 | 4小时前 | python · pathlib · 文件系统 · 目录遍历 · 符号链接 · 目录遍历 符号链接 Python pathlib.Path.walk follow_symlinks319 收藏
-
171 收藏
-
文章 · python教程 | 6小时前 | 标准库 · 安全 · python · 类型注解 · 类型注解 Python 3.14 annotationlib get_annotations ForwardRef462 收藏
-
文章 · python教程 | 6小时前 | 并发 · python · logging · 故障排查 · QueueListener · 优雅停机 日志丢失 QueueHandler 日志队列 Python QueueListener316 收藏
-
183 收藏
-
464 收藏
-
295 收藏
-
387 收藏
-
392 收藏
-
139 收藏
-
484 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 485次学习