当前位置:首页 > 文章列表 > 文章 > python教程 > Python collections.deque maxlen 实现滚动窗口的更新方案

Python collections.deque maxlen 实现滚动窗口的更新方案

来源:17golang原创 2026-11-13 17:59:32 0浏览 收藏

处理“只保留最近几条数据”的需求时,直接使用 collections.deque(maxlen=N) 最稳妥。它把容量写进容器:用 append() 按时间顺序加入新记录,窗口已满时自动丢掉最旧的一端;如果数据从左侧加入,则从右端淘汰。关键是先约定新旧方向,再选择追加方法。

官方地址:https://docs.python.org/3.15/library/collections.html

要点速览
  • deque(maxlen=3) 满容量后追加会自动淘汰,不需要手写 pop(0)。
  • append() 让新数据在右侧,淘汰左侧;appendleft() 方向相反。
  • insert() 在有界 deque 满时不会自动淘汰,而是抛出 IndexError。

先把滚动窗口的淘汰方向定下来

一次故障复盘中,窗口里明明设置了 3 条记录,结果展示出来的并不是“最近三次”,原因不是 maxlen 失效,而是生产代码混用了两种追加方向。建议把最旧记录放在左边、最新记录放在右边,这样阅读和排查都更直观。

from collections import deque

# maxlen 把窗口容量固定为 3,左端代表最旧记录
recent = deque(maxlen=3)
for event in ("A", "B", "C", "D"):
    # 新记录从右端进入,满容量时自动丢弃左端的 A
    recent.append(event)

print(list(recent))  # ['B', 'C', 'D']
Python collections.deque maxlen 滚动窗口从左到右追加并淘汰最旧记录的结构说明图
图1:deque maxlen 的追加与淘汰方向说明图,不是截图或运行证据。

这个行为适合最近日志、最近价格、最近几次状态变化等场景。它只保存当前窗口,旧记录被淘汰后不会自动归档;如果还要追溯完整历史,应把持久化写入单独的数据流。

append、appendleft 和读取边界怎么配套

如果上游数据已经按时间从旧到新到达,使用 append() 即可。若接收端总是先拿到最新值,使用 appendleft(),此时最新值在下标 0,最旧值在右端。

from collections import deque

def push_latest(window, value, newest_first=False):
    # 调用方明确顺序,避免同一窗口混用两种方向
    if newest_first:
        window.appendleft(value)
    else:
        window.append(value)
    # 返回快照,避免把内部 deque 直接暴露给修改方
    return tuple(window)

latest_first = deque(maxlen=3)
print(push_latest(latest_first, "C", True))
print(push_latest(latest_first, "B", True))
print(push_latest(latest_first, "A", True))  # ('A', 'B', 'C')

读取时优先使用 len(window) 判断当前是否有数据,再访问 window[0] 或 window[-1]。空 deque 直接取下标会抛出 IndexError,不要把它误判成容量配置错误。

Python deque append 与 appendleft 的新旧方向以及 insert 满容量异常边界关系图
图2:两种追加方向与 insert 边界的关系说明图,不是截图或运行证据。

别把 insert 当成有界窗口追加

maxlen 只约束两端追加和扩展的滚动语义。满容量时调用 insert(i, value),Python 会抛出 IndexError,因为它无法替你决定应该从哪一端丢数据。需要“新值进来、旧值出去”时,统一封装 append 或 appendleft,不要在业务代码里随机插入。

操作满容量时的结果适用判断
append(x)从左端淘汰新值在右端
appendleft(x)从右端淘汰新值在左端
insert(i, x)抛出 IndexError需要明确位置且不能自动丢弃
maxlen=None不自动淘汰不适合无限增长的请求日志

容量参数也要在入口处校验:maxlen=0 会让追加后的 deque 仍保持为空;负数容量会直接报错。对外暴露时,可以只允许正整数,把“是否保留历史”的需求分流到数据库、文件或专门的消息队列。

上线前的四项核对

  • 确认下标 0 和 -1 分别代表最新还是最旧,写在函数文档中。
  • 只让一个封装函数负责追加,避免调用方混用方向。
  • 为空时先判断长度,再读取首尾元素。
  • 窗口用于短期状态;需要审计、回放或跨进程消费时,另设持久化边界。

常见问题

deque 的 maxlen 满了会主动报错吗?

使用 append、appendleft 或 extend 时通常会自动淘汰另一端;insert 在满容量时才会因为无法决定淘汰方向而抛出 IndexError。

为什么不用 list 加 pop(0)?

固定容量的两端进出是 deque 的直接语义,避免在列表头部移动大量元素;如果还需要频繁随机访问中间位置,应重新评估数据结构。

maxlen 能保证多进程之间的窗口一致吗?

不能。它只约束单个 deque 对象的内存状态,不提供跨进程同步、持久化或故障恢复。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Python tomllib 读取配置并校验必填字段的方案Python tomllib 读取配置并校验必填字段的方案
上一篇
Python tomllib 读取配置并校验必填字段的方案
Python dataclasses.asdict 怎样把嵌套数据类转换为字典
下一篇
Python dataclasses.asdict 怎样把嵌套数据类转换为字典
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    1014次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    1019次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    1143次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    1119次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    960次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码