当前位置:首页 > 文章列表 > 文章 > python教程 > Python functools.cache 递归函数如何避免缓存错误结果

Python functools.cache 递归函数如何避免缓存错误结果

来源:17golang原创 2026-09-15 17:48:47 0浏览 收藏

functools.cache 递归函数出现“缓存了错误结果”时,通常不是缓存算法算错,而是缓存键没有覆盖决定结果的全部输入。递归函数如果偷偷读取全局变量、可变阻塞集合或外部配置,第一次计算留下的结果就可能被后续调用复用。解决办法是让返回值成为完整参数的纯函数:状态放进可哈希参数,状态改变时清理旧缓存,再用统计接口确认命中情况。

要点速览
  • @cache 是无界缓存,参数必须可哈希,递归子问题的完整状态必须进入缓存键。
  • 隐藏的全局变量变化不会自动让旧条目失效;长期进程要明确调用 cache_clear()
  • cache_info() 只能帮助观察命中、未命中和条目数量,不能替代状态设计。

先判断:错误结果是不是来自隐藏状态

一个缓存条目可以理解为“参数元组 → 返回值”。如果同一组参数在不同时间可能得到不同结果,就不适合直接使用 @cache。递归函数尤其容易踩这个坑:函数参数只有当前位置,但路径是否可走却从全局集合读取;或者函数依赖当前配置、数据库内容、时间和随机数。

例如路径计数函数读取模块级的 BLOCKED。第一次用障碍物 A 计算后,障碍物换成 B,调用参数仍然相同,缓存自然会返回障碍物 A 的旧答案。此时“结果错误”其实是缓存键遗漏了环境状态。

把完整状态放进递归缓存键

把障碍物整理成排序后的元组,并作为递归参数传递。这样 positionblocked 一起描述了一个确定的子问题;相同子问题可以复用,不同障碍物集合会产生不同缓存条目。

from functools import cache

@cache
def count_paths(position, blocked):
    # position 是当前坐标,blocked 是不可变的障碍物元组
    if position == (2, 2):
        return 1
    if position in blocked or position[0] > 2 or position[1] > 2:
        return 0
    # 两个递归分支共享同一组完整状态,结果可以安全复用
    right = count_paths((position[0] + 1, position[1]), blocked)
    down = count_paths((position[0], position[1] + 1), blocked)
    return right + down

blocked_a = ((1, 1),)
blocked_b = ((0, 1),)
print(count_paths((0, 0), blocked_a))
print(count_paths((0, 0), blocked_b))

这里没有把列表直接作为参数,因为列表不可哈希;也不要在递归过程中原地修改一个共享集合。若障碍物顺序不影响语义,调用前应统一排序并转成元组,否则同一组障碍物的不同排列也会制造重复条目。

Python functools.cache 递归路径计数中 position、blocked、cache key 与返回值的静态关系说明图
图1:结构说明图,递归子问题的完整状态共同组成缓存键,返回值才有可复用边界。

用 cache_info 和 cache_clear 验证结果

调试时先清空,再用一组输入调用两次,观察 hits 是否增加;切换了会影响结果的配置后,如果暂时不能把配置改成参数,就必须清理缓存。清理的是包装器内部的条目,不会修改函数代码。

# 先清除旧实验数据,避免把上一次调用算进判断
count_paths.cache_clear()
first = count_paths((0, 0), blocked_a)
second = count_paths((0, 0), blocked_a)
stats = count_paths.cache_info()
print(first, second, stats.hits, stats.misses, stats.currsize)

# 外部状态确实改变且未纳入参数时,主动切断旧结果
count_paths.cache_clear()
现象优先检查处理方式
输入相同却应得到不同结果全局变量、配置、时间、随机数把状态加入参数,或在边界处清理缓存
命中数很低、条目增长快参数排列、粒度和状态空间规范化不可变参数,限制输入范围
返回对象被调用方修改缓存的返回值是否可变返回不可变值,或复制后再交给调用方
Python functools.cache 的 cache_info 指标与 cache_clear 清理边界关系说明图
图2:关系说明图,统计接口观察缓存占用,状态改变时由 cache_clear 切断旧结果。

递归缓存的边界与检查清单

@cache 适合确定性、重复子问题多且输入规模可控的递归计算。它不会淘汰旧条目,长时间运行的服务要留意内存;函数参数和返回值也会被缓存持有。带副作用的函数、依赖当前时间或随机数的函数、返回需要独立修改的可变对象,都不应直接缓存。

发布前可按四项检查:一是返回值是否只由参数决定;二是每个参数是否可哈希且表达完整状态;三是状态切换是否有清理边界;四是 cache_info() 的命中和条目增长是否符合预期。只要其中一项答不上来,就先拆出纯计算函数,再决定是否加缓存。

常见问题

functools.cache 和 lru_cache(maxsize=None) 有什么区别?

cache 是轻量的无界缓存,语义上等同于 lru_cache(maxsize=None);如果需要限制条目数量,应使用带 maxsizelru_cache

递归函数使用 cache 后为什么内存一直增长?

因为 cache 不会主动淘汰条目。检查输入是否持续产生新状态,必要时使用有限大小的 LRU 缓存、分批调用并在边界处清理。

调用 cache_clear 后还会得到旧值吗?

同一个包装器的缓存条目会被清空;如果仍然是旧结果,应继续检查另一个缓存层、可变返回值,或函数读取的外部状态是否没有真正更新。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
墨刀AI做产品原型时,移动端和后台端要分开测试吗?墨刀AI做产品原型时,移动端和后台端要分开测试吗?
上一篇
墨刀AI做产品原型时,移动端和后台端要分开测试吗?
Go regexp.Expand 如何把捕获组写入缓冲区
下一篇
Go regexp.Expand 如何把捕获组写入缓冲区
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    42次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    136次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    73次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    35次使用
  • CMMLU中文大模型评估基准:功能、使用教程与应用场景解析
    CMMLU
    深入了解CMMLU中文评估基准,涵盖67个学科主题,提供数据集下载、Zero-shot/Five-shot评估方法及排行榜,助力优化中文语言模型性能。
    23次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码