当前位置:首页 > 文章列表 > 数据库 > Redis > Redis Pub/Sub 与 Streams 怎样按是否持久化选择

Redis Pub/Sub 与 Streams 怎样按是否持久化选择

来源:17golang原创 2026-10-26 01:53:40 0浏览 收藏

如果一条消息只是通知当前在线的 WebSocket 客户端,晚到几秒或偶尔丢失都可以接受,优先看 Redis Pub/Sub;如果消息要补发、重试、按消费组分工,或者需要在故障后查出“哪些消息还没处理”,就应当看 Redis Streams。两者都能很快,但“是否持久化”不是在命令旁边加一个开关就能解决的,而是消息模型的选择。

官方地址:https://redis.io/

值班时先问四件事:离线订阅者是否必须补收?是否要按 ID 回放?是否需要消费确认?Redis 故障后能否接受最近写入的消息缺失?前两问有一个回答“必须”,通常就不应只用 Pub/Sub。

本文适合:正在设计缓存失效通知、订单事件、异步任务或实时推送的后端开发者和运维人员。下面只比较 Redis Pub/Sub 与 Streams,不扩展到 Kafka 等外部消息系统。

先看消息能否丢失:两个模型的根本差异

先不要从命令背诵开始,而是看触发信号。Pub/Sub 把消息送给发布瞬间仍然在线的订阅者,订阅连接断开期间没有可供补读的消息;这使它适合缓存失效、在线状态变化和“有就通知、没有也能重新计算”的事件。Streams 则把消息作为带 ID 的条目追加到 Redis 数据结构中,之后可以按范围读取,也可以交给消费组分工处理。

现场信号优先选择原因
只通知当前在线连接,丢一条可由下一次状态同步补回Pub/Sub路径短,模型简单,不维护历史消息
消费者重启后要从上次位置继续Streams条目有 ID,可以回放和定位范围
多个处理实例要分摊消息,并记录未确认项Streams消费组和待处理列表提供处理边界
消息必须落盘且故障后尽量恢复Streams + Redis 持久化配置数据结构只是基础,AOF/RDB、复制和故障切换仍要单独配置
Redis Pub/Sub 即时广播与 Streams 可回放日志的静态关系结构图
图1:结构说明图,比较 Pub/Sub 的在线广播边界与 Streams 的可回放记录边界。

Pub/Sub 适合什么:即时广播,不负责补发

Pub/Sub 的最小路径是 PUBLISH channel payload 与 SUBSCRIBE channel。发布者只关心频道,Redis 将消息推给当时订阅该频道的客户端。它不要求建立消息历史,也没有消费确认,因此很适合“推一下就结束”的通知。

# 中文说明:订阅连接进入接收状态,只接收当前在线期间的消息
redis-cli SUBSCRIBE cache-invalidate

# 中文说明:发布缓存失效通知;没有在线订阅者时不要把它当作可靠队列
redis-cli PUBLISH cache-invalidate '{"key":"product:42"}'

这类场景的回滚路径不是“从 Pub/Sub 找回上一条消息”,而是让消费者重新读取权威状态。例如缓存失效通知丢失后,下一次请求仍能从数据库或服务接口重建缓存。若业务必须依靠每一条通知推进状态,就不要把 Pub/Sub 当成持久化队列。

值班判断可以很直接:订阅者重连后是否需要知道断线期间发生了什么?如果答案是“需要”,Pub/Sub 已经越过适用边界;如果答案是“重新拉一次当前状态即可”,它通常更轻量。

Streams 适合什么:记录、回放和消费确认

Streams 的入口是 XADD。Redis 为新条目生成 ID,应用可以用 XREAD 或范围查询读取;需要多个处理实例分摊任务时,再建立 consumer group,通过 XREADGROUP 领取,并在处理完成后 XACK。

# 中文说明:追加一条带业务字段的事件,* 让 Redis 生成递增 ID
redis-cli XADD order-events '*' order_id 1001 action paid

# 中文说明:创建消费组;$ 表示从当前末尾开始,不追历史条目
redis-cli XGROUP CREATE order-events billing '$' MKSTREAM

# 中文说明:消费组读取新条目;处理成功后再确认,避免把未处理项误标为完成
redis-cli XREADGROUP GROUP billing worker-1 COUNT 10 BLOCK 1000 STREAMS order-events '>'
redis-cli XACK order-events billing 0-1

这里的“可持久化”要拆开理解:Streams 条目属于 Redis 数据结构,可以随 Redis 的 AOF/RDB 机制保存和恢复;但 AOF 的刷盘策略、主从复制延迟和故障切换策略,仍然决定最近写入能恢复到什么程度。不要把 Streams 写成绝对意义上的消息不丢失。

Redis Streams 条目、AOF RDB、复制副本与消费确认的故障边界结构图
图2:边界说明图,定位 Streams 的持久化、复制与消费确认关系,以及 Pub/Sub 的在线投递边界。

生产故障时怎样处理:回滚、告警与复盘

快速判断:先看消息是否仍在生成,再看 Streams 长度、消费组待处理项和 Redis 持久化状态。不要先盲目增加消费者数量;如果消费者处理失败,扩容只会把同一个下游故障放大。

# 中文说明:观察日志条目数量,判断生产端是否仍在追加
redis-cli XLEN order-events

# 中文说明:查看消费组和待处理条目,定位“已投递但未确认”的消息
redis-cli XINFO GROUPS order-events
redis-cli XPENDING order-events billing

# 中文说明:确认后端恢复后,再从待处理列表选择性重试并确认
redis-cli XACK order-events billing 0-1

回滚路径:如果新消费者版本把消息处理坏了,先停止该版本继续领取;保留 Streams 条目和待处理状态,回退消费者后从待处理项恢复。若是 Pub/Sub 消费者异常,则回滚订阅端并执行一次权威状态同步,不要试图从 Redis Pub/Sub 查询历史。

告警确认:Streams 重点监控待处理项持续增长、最老待处理项年龄、生产速率与确认速率差值,以及 AOF/复制状态;Pub/Sub 重点监控订阅连接数、发布失败和下游状态同步是否能补齐,不要用“队列长度”去衡量 Pub/Sub 的可靠投递。

复盘项:记录当时选择模型的前提、允许丢失的消息类型、消费者重启后的补偿动作、持久化和复制配置,以及最终是否真的需要回放。若复盘发现每次都要补发或人工查漏,下一版设计应把消息迁移到 Streams,而不是继续给 Pub/Sub 添加隐式状态。

常见问题

Pub/Sub 开启 AOF 后就能补发断线消息吗?

不能。AOF 保存的是 Redis 执行过的写操作,而 Pub/Sub 消息本身不是可供订阅者按 ID 读取的历史条目。需要补发时,应让发布端写入 Streams 或其他权威记录,再由实时通道做通知。

Streams 是否可以完全替代 Pub/Sub?

不必强行替代。只做在线广播时 Pub/Sub 的语义更简单;需要记录、回放、消费组和确认时才使用 Streams。选型应由丢失、回放和确认要求决定,而不是由“哪个命令更新”决定。

总结

把 Redis Pub/Sub 视为即时广播,把 Streams 视为可读取的事件日志:能丢且可由状态同步补回,选 Pub/Sub;不能丢、要回放、要分工或要确认,选 Streams,并同步设计 AOF/RDB、复制、故障切换和告警。这样“是否持久化”才会落到可操作的运维判断上。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
Redis MEMORY USAGE 怎样估算键的内存占用Redis MEMORY USAGE 怎样估算键的内存占用
上一篇
Redis MEMORY USAGE 怎样估算键的内存占用
Redis ACL 怎样只允许消费者读取指定命令
下一篇
Redis ACL 怎样只允许消费者读取指定命令
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • PubMedQA数据集详解:生物医学问答基准、功能与应用指南
    PubMedQA
    深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
    693次使用
  • H2O EvalGPT:开源LLM大模型评估与排行榜工具
    H2O EvalGPT
    H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
    706次使用
  • LMArena是什么?伯克利AI模型评估平台使用指南与功能解析
    LMArena
    LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
    774次使用
  • 斯坦福HELM:大语言模型Holistic Evaluation整体评估框架详解
    HELM
    深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
    734次使用
  • MMBench详解:多模态大模型基准测试、功能特点与使用指南
    MMBench
    MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
    568次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议 和 隐私政策
返回登录
  • 重置密码