当前位置:首页 > 文章列表 > 数据库 > Redis > Redis lazyfree 怎样降低删除大键的阻塞

Redis lazyfree 怎样降低删除大键的阻塞

来源:17golang原创 2026-10-20 23:19:19 0浏览 收藏

Redis 删除大键时,真正让主线程卡住的通常不是“键名从字典里消失”,而是对象内部大量元素的内存释放。处理缓存批量淘汰、用户数据清理或历史列表裁剪时,可以优先用 UNLINK:它先把键从 keyspace 摘掉,再把较重的回收工作交给后台线程。这样能缩短命令响应路径,但不会让内存立刻下降,也不能消除后台回收带来的 CPU 压力。

官方地址:https://redis.io/docs/latest/

要点速览
  • DEL 同步完成对象释放,UNLINK 先摘链、后异步回收。
  • lazyfree-lazy-expire、lazyfree-lazy-eviction 只对应过期和淘汰路径,不能代替主动删除时的 UNLINK。
  • 灰度时同时看命令延迟、后台回收压力和 used_memory 回落速度,不能只看删除命令是否快速返回。

先把删除动作拆成摘链与回收

大字符串通常不容易把删除拖得很久,真正需要警惕的是包含大量分配单元的 Hash、List、Set 或 ZSet。DEL 会在主线程里完成删除和释放;UNLINK 对每个键的摘链动作是 O(1),之后由其他线程处理对象回收。这里的“异步”只改变释放发生的线程和时间,不改变数据已经不可读这一事实。

我在处理大键时会先把目标分成两类:必须立刻从业务视图消失的键可以用 UNLINK;需要等待后台真正释放完成才能继续的内存预算,则必须额外观察回收进度。不要把 UNLINK 当成“删除零成本”,它只是把工作从请求关键路径挪开。

Redis UNLINK 大键删除路径中主线程摘链、释放队列和后台线程回收的关系示意图
图1:UNLINK 的线程边界说明图,展示摘链与内存回收的先后关系。
# 先确认键的类型和大致规模,再选择删除命令
redis-cli TYPE cache:user:1001
redis-cli MEMORY USAGE cache:user:1001

# 让键立即离开 keyspace,实际对象释放异步进行
redis-cli UNLINK cache:user:1001

# 返回 1 只说明键被摘除,不代表后台已经释放完全部内存
redis-cli EXISTS cache:user:1001

配置 lazyfree 时只打开匹配的路径

主动删除场景的核心动作仍然是调用 UNLINK。如果延迟来自过期或达到 maxmemory 后的淘汰,再分别考虑 lazyfree-lazy-expire 与 lazyfree-lazy-eviction。它们会改变对应路径的释放方式,不应因为“已经打开 lazyfree”就把所有删除都改成同步 DEL 或异步 UNLINK。

场景优先动作主要代价
应用主动删除大键使用 UNLINK后台线程回收滞后,内存不会立即归还
键自然过期评估 lazyfree-lazy-expire过期高峰可能形成后台队列
内存淘汰评估 lazyfree-lazy-eviction淘汰速度与回收速度可能暂时不匹配

运行时可以用 CONFIG GET 查看当前值,用 CONFIG SET 做小范围试验;确认方案后还要把配置写入配置文件或执行合适的重写流程,因为运行时变更不会自动替代下次启动所使用的文件。

# 读取三个与后台释放相关的开关
redis-cli CONFIG GET lazyfree-lazy-expire lazyfree-lazy-eviction lazyfree-lazy-server-del

# 仅示例:先在低流量实例观察过期回收的影响
redis-cli CONFIG SET lazyfree-lazy-expire yes

# 试验结束后检查值,避免把临时设置误当成持久配置
redis-cli CONFIG GET lazyfree-lazy-expire

配置 lazyfree 后怎样判断是否真的缓解阻塞

判断是否有效要分三层。第一层看客户端看到的删除命令延迟;第二层看 Redis 主线程是否还被其他 O(N) 操作拖住;第三层看逻辑删除之后,used_memory 是否缓慢回落、后台线程是否长期繁忙。只看第一层,容易误判为“内存问题已经解决”。

可以先把延迟监控阈值设为业务能接受的毫秒数,再用 LATENCY LATEST 或慢日志观察删除高峰前后的变化。监控命令本身不是因果证明:如果主线程延迟下降、后台回收积压却持续增长,就要降低批量删除速度或拆分大对象,而不是继续提高删除并发。

Redis lazyfree 从主动删除、过期和淘汰到延迟与内存观测的闭环结构图
图2:lazyfree 观察闭环结构图,说明配置开关与指标判断的关系。
# 只记录超过业务阈值的延迟事件,数值按业务 SLA 调整
redis-cli CONFIG SET latency-monitor-threshold 100

# 查看最近记录的延迟事件,关注删除高峰附近的变化
redis-cli LATENCY LATEST

# 观察逻辑删除后的内存趋势,不能把一次采样当作结论
redis-cli INFO memory | grep -E 'used_memory:|lazyfree_pending_objects:'

如果实例版本或部署形态没有提供你需要的指标,就用固定时间窗口记录 INFO memory、命令延迟和业务 QPS,比较灰度前后趋势。不要给后台队列设一个脱离机器 CPU、内存和对象大小的万能阈值。

批量删除大键的灰度清单

  1. 先用 MEMORY USAGE 和数据结构规模抽样,按小批量执行 UNLINK。
  2. 给删除任务限速,避免在后台回收尚未追平时继续制造大量释放工作。
  3. 同时记录命令延迟、lazyfree_pending_objects、used_memory 和主机 CPU。
  4. 若逻辑删除很快但内存长期不降,先确认后台队列、碎片和持久化压力,再决定是否扩大批次。
  5. 需要回退时暂停清理任务即可;已经执行的 UNLINK 不可恢复,重要数据应先由业务侧完成备份或确认。

一句话总结:UNLINK 适合把大键释放移出 Redis 主线程,lazyfree 开关适合调整过期和淘汰路径;两者都必须和限速、内存趋势及延迟监控一起使用。

常见问题

UNLINK 返回后为什么内存还没有下降?

因为返回表示键已从 keyspace 摘除,实际对象回收在后台线程完成,回收速度还会受对象大小、CPU 和碎片影响。

打开 lazyfree-lazy-expire 后还需要主动使用 UNLINK 吗?

需要。前者针对自然过期路径,主动删除仍应由调用方选择 UNLINK,两条路径不是同一个开关。

能不能把 lazyfree 相关开关全部打开?

不建议直接全开。先按延迟来源选择路径,在低流量实例灰度,并观察后台回收压力是否超过机器承载能力。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Redis LFU 淘汰怎样理解计数器衰减Redis LFU 淘汰怎样理解计数器衰减
上一篇
Redis LFU 淘汰怎样理解计数器衰减
Redis GEOSEARCH 怎样按距离和形状筛选位置
下一篇
Redis GEOSEARCH 怎样按距离和形状筛选位置
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    570次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    614次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    641次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    602次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    419次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码