当前位置:首页 > 文章列表 > 文章 > python教程 > Python memoryview 使用后如何释放底层资源

Python memoryview 使用后如何释放底层资源

来源:17golang原创 2026-09-14 23:28:06 0浏览 收藏

memoryview 用完后,最明确的做法是调用 view.release();如果使用边界清楚,直接写成 with memoryview(source) as view: 更稳妥。它释放的是视图持有的底层缓冲区导出,不是把 source 这个 Python 对象删除。视图释放后继续访问会抛出 ValueError,但可以重复调用 release()

先记住这四点
  • memoryview 主要提供不复制数据的访问窗口,因此可能让导出者暂时不能调整大小。
  • 明确结束点优先用 with;跨函数传递时由创建者和消费者约定谁负责 release
  • 切片或 cast() 得到的派生视图也可能继续持有缓冲区,不能只释放一个局部变量就认为完成。
  • 释放视图不等于关闭文件、mmap 或其他底层资源,后者仍要由对应的上下文管理器负责。

先分清 memoryview 和底层资源是谁

memoryview 是对支持缓冲区协议对象的一层视图,常见来源包括 bytearraybytes 和内存映射。视图存在期间,导出者需要保证这段缓冲区仍然有效;因此可变对象可能暂时拒绝改变长度。这个限制保护的是视图仍在使用的地址,不代表 Python 对象本身发生了泄漏。

Python 官方文档把 release() 定义为释放视图暴露的底层缓冲区。调用后,视图不再可读写,任何普通操作都会得到“已释放 memoryview”的 ValueError。如果只是把变量名改成 None,其他别名或派生视图仍可能继续持有这份导出,释放时机就不够直观。

Python memoryview、缓冲区导出与底层 bytearray 或 mmap 对象的静态所有权关系图
图1:视图层、缓冲区导出层和底层对象是三个不同概念,release 解除的是中间的持有关系。

使用范围固定时优先用 with 自动释放

当数据只在一个函数或一个代码块内读取,with 能把释放边界写在结构里。离开代码块时,即使处理过程中抛出异常,视图也会执行释放。若要把视图中的一段数据交给外部,先复制成 bytes;否则把已经释放的视图返回出去,调用方拿到的只是一个不可用句柄。

def read_header(source: bytearray, size: int = 8) -> bytes:
    # 视图只在读取期间存在,返回 bytes 后不再依赖底层缓冲区。
    with memoryview(source) as view:
        if size  len(view):
            # 用明确的参数错误阻止越界读取。
            raise ValueError("size 超出缓冲区范围")
        return bytes(view[:size])


buffer = bytearray(b"PYTHON-buffer")
header = read_header(buffer, 6)
# 函数返回后,buffer 已经可以继续调整长度。
buffer.extend(b"-ok")
print(header, buffer)

如果需要手动控制生命周期,也要把 release() 放在 finally 中。这样写适合视图的使用范围跨过多个分支,但仍然由当前函数拥有它的情况。

view = memoryview(buffer)
try:
    # 这里执行需要零拷贝访问的解析逻辑。
    checksum = sum(view)
finally:
    # 无论解析成功还是失败,都解除缓冲区导出。
    view.release()

buffer.extend(b"-released")

为什么 bytearray 仍然不能扩容

最容易观察到的现象是:创建 memoryview(bytearray) 后,对原来的 bytearray 调用 extend() 可能得到 BufferError。原因不是 memoryview 把数据复制走了,而是可变长度操作可能改变底层地址,导出者必须等所有视图释放后才能调整容量。

buffer = bytearray(b"abc")
view = memoryview(buffer)
try:
    # 视图仍在使用,调整 bytearray 长度可能破坏它的地址稳定性。
    buffer.extend(b"d")
except BufferError:
    print("先释放 memoryview,再改变长度")
finally:
    # release 是幂等的,收尾时重复调用也不会再次占用资源。
    view.release()

buffer.extend(b"d")
print(buffer)

切片和 cast 产生的视图也要纳入清理

view[:4]view.cast(...) 返回的仍是视图,不是自动复制出的独立字节串。工程代码中如果把它们保存到列表、缓存或异步任务里,原始视图变量释放后,派生视图仍可能延长缓冲区导出的生命周期。要么在边界处立刻转成 bytes,要么让每个拥有派生视图的对象负责结束它。

raw = bytearray(b"0123456789")
with memoryview(raw) as whole:
    # bytes 会复制当前片段,后续不再依赖 whole 或 sliced。
    copied = bytes(whole[2:6])
    with whole.cast("B") as byte_view:
        # 这里只使用派生视图完成一次按字节检查。
        has_digit = all(48 

不要把释放后的视图放进返回值或跨线程队列;如果消费者确实需要延迟读取,就把资源所有权一起传递,并在消费者的 finally 中释放。与其依赖引用计数或垃圾回收“稍后处理”,不如让所有权和结束点出现在接口约定中。

Python with memoryview、bytes 复制和派生视图 release 之间的静态生命周期边界图
图2:使用窗口、复制结果和派生视图分别属于不同边界,只有仍被持有的视图都结束后,底层对象才可安全变长。

mmap 等场景要分两次收尾

如果视图来自 mmap.mmap,需要同时管理两个对象:先结束仍在使用的 memoryview,再关闭映射对象。release() 不会替你关闭文件描述符或映射;它只是让视图不再持有缓冲区。把两层上下文嵌套起来,通常比手动记顺序更不容易漏清理。

import mmap

with open("sample.bin", "rb") as file_obj:
    with mmap.mmap(file_obj.fileno(), 0, access=mmap.ACCESS_READ) as mapped:
        # memoryview 的退出必须发生在 mmap 关闭之前。
        with memoryview(mapped) as view:
            prefix = bytes(view[:16])

print(prefix)

排查资源迟迟不能关闭时,可以按“是否还有视图别名、是否保存了切片或 cast 结果、是否只丢了变量名、底层对象是否另有 close 方法”逐项检查。若异常发生在视图构造之后,清理代码仍应位于同一所有权边界内。

一张表判断该用哪种释放方式

场景推荐方式注意点
函数内读取后返回独立结果with memoryview,结果转 bytes不要返回已释放视图
多个分支共享一个视图try/finally 调用 release所有分支都必须经过 finally
视图被切片或 cast复制或分别管理派生视图释放原视图不代表别名都结束
底层是 mmap 或文件先释放视图,再关闭映射或文件两种资源各自负责清理

常见问题

del view 能不能代替 release?

不建议把它当作明确的资源协议。del 只删除当前名称,其他引用仍可能存在;显式 release()with 更能表达结束点。

release 后还能读取 view 吗?

不能。释放后的普通访问会抛 ValueError;需要保留数据时,应在释放前复制成 bytes 或其他独立对象。

调用 release 会关闭 mmap 吗?

不会。它只结束 memoryview 对缓冲区的持有;mmap、文件和其他底层资源仍需调用各自的关闭逻辑。

判断 Python memoryview 是否需要释放,关键不在于“对象大不大”,而在于它是否仍然持有缓冲区导出,以及后续是否要调整或关闭底层对象。把 with 用在短生命周期场景,把 try/finally 用在明确的所有权边界,再把派生视图和底层资源分别纳入清理,就能避免大多数 BufferError 和关闭顺序问题。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
第一次用SkildArt做跨境电商素材,如何建立母版与多语言变体流程?第一次用SkildArt做跨境电商素材,如何建立母版与多语言变体流程?
上一篇
第一次用SkildArt做跨境电商素材,如何建立母版与多语言变体流程?
Go math/big.Int.QuoRem 处理负数商和余数时怎么验算
下一篇
Go math/big.Int.QuoRem 处理负数商和余数时怎么验算
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    26次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    130次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    62次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    23次使用
  • OpenCompass大模型评测体系详解:功能、使用指南与应用场景
    OpenCompass
    OpenCompass是上海AI实验室推出的开源大模型评测平台,提供CompassKit、CompassHub和CompassRank三大核心组件,支持LLM及多模态模型的一站式标准化评估与排行榜查询。
    81次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码