Redis布隆过滤器防缓存穿透详解
2026-05-01 16:36:50
0浏览
收藏
布隆过滤器是当前应对缓存穿透最可控、最有效的防御手段,但其威力完全依赖于正确落地——必须前置部署在Redis之前,对非法key进行毫秒级拦截;它虽存在不可删除和固有误判率的局限,却能从根本上避免海量随机无效请求击穿缓存直捣数据库,尤其在面对恶意刷量时远胜空值缓存;不过,它绝非万能解药,需严格按真实数据规模预估容量与误判率,并务必与参数校验、接口限流及逻辑删除兜底策略协同使用,才能构建真正健壮的高并发防护体系。

布隆过滤器不是“银弹”,但它确实是解决缓存穿透最可控的手段——前提是它被正确集成到请求入口,且不被绕过。
为什么空值缓存拦不住恶意穿透
空值缓存(setex key 120 "@@EMPTY@@")对正常业务有效,但面对攻击者用随机 user_id 或 UUID 疯狂刷接口时,会迅速堆积海量无效 key,吃光 Redis 内存。更关键的是:它只对“已查过的空 key”起作用,对全新、未见过的非法 key 完全无感。
- 攻击者每秒发 1000 个不存在的
user:abc123、user:def456,每个都触发一次 DB 查询 EMPTY_CACHE_TTL设太长(比如 30 分钟),新注册用户可能因历史空缓存而查不到- 空值缓存无法区分“真不存在”和“暂时没数据”,逻辑上存在语义污染
布隆过滤器必须放在 Redis 之前
布隆过滤器(Bloom Filter)本质是内存中的概率型集合,只能回答“这个 key 可能存在”或“一定不存在”。它必须部署在缓存查询之前,否则就失去拦截意义。
- 正确链路:
请求 → 布隆过滤器 → (若“一定不存在”则直接返回)→ Redis → DB - 错误链路:
请求 → Redis → (未命中)→ 布隆过滤器 → DB—— 此时穿透已经发生 - 推荐用 Redis 自带的
bf.exists(RedisBloom 模块),或 Java 的guava BloomFilter+ 本地缓存兜底 - 初始化时要把所有合法
user_id、product_id全量哈希进去;增量数据需同步更新布隆结构
布隆过滤器的两个硬约束不能妥协
误判率(false positive rate)和容量(expected insertions)是布隆过滤器的一体两面,改一个必动另一个。生产环境必须按真实数据量预估,不能拍脑袋。
- 假设你有 1 亿个合法用户 ID,要求误判率 ≤ 0.1%,那布隆过滤器至少需要 ≈ 1.4 GB 内存(用标准公式计算)
- 如果用太小的 bitmap,误判率飙升,会导致大量合法请求被误杀,业务直接报错
- 布隆过滤器不支持删除,所以被软删除的 ID(如用户注销)仍会“存在”于过滤器中,需配合「逻辑删除 + TTL 缓存」兜底
- 别用
String拼接做简易布隆——它没有抗碰撞设计,攻击者可轻易构造哈希冲突绕过
必须搭配参数校验和限流才真正可靠
布隆过滤器防的是“不存在的 key”,但挡不住“存在却非法的请求”,比如 user_id = -1、user_id = "admin" 这类明显越权或格式错误的输入。
- 在布隆前加一层基础校验:
if (id - 对高频空响应路径(如
GET /user/{id}返回 404)做 QPS 限制,用 Redis 的INCR + EXPIRE实现简单令牌桶 - 日志里埋点统计
bf.exists == false的请求来源 IP 和 User-Agent,快速识别扫描行为 - 不要单独依赖布隆过滤器——它只是第一道筛子,后面还得有空值缓存兜底、互斥锁防击穿、TTL 随机化防雪崩
真正难的不是接入布隆过滤器,而是持续维护它的数据一致性:ID 池扩容、灰度发布、DB 分库分表后的多源合并、离线任务失败重试……这些地方一旦断链,布隆就从守门员变成摆设。
今天关于《Redis布隆过滤器防缓存穿透详解》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!
Golang微服务限流方案详解
- 上一篇
- Golang微服务限流方案详解
- 下一篇
- 可画制作闲鱼海报:二手转卖配图教程
查看更多
最新文章
-
- 数据库 · Redis | 2小时前 | 消息队列 · redis 消费者组 XAUTOCLAIM Redis Streams pending消息
- Redis 消费者组 pending 消息的认领与恢复流程
- 101浏览 收藏
-
- 数据库 · Redis | 4小时前 |
- Redis Streams 按业务时间裁剪历史消息的参数方案
- 145浏览 收藏
-
- 数据库 · Redis | 6小时前 | Redis · redis 地理位置 GEOSEARCHSTORE
- Redis GEOSEARCHSTORE 怎么保存附近对象结果
- 351浏览 收藏
-
- 数据库 · Redis | 16小时前 |
- Redis BLMOVE 怎么实现可恢复的阻塞队列
- 460浏览 收藏
-
- 数据库 · Redis | 18小时前 |
- Redis BITFIELD 溢出策略 WRAP SAT FAIL 怎么选
- 471浏览 收藏
-
- 数据库 · Redis | 20小时前 |
- Redis SET 的 GET 选项怎么原子取得旧值
- 413浏览 收藏
-
- 数据库 · Redis | 22小时前 | Redis ·
- Redis 分片 Pub/Sub 与普通 Pub/Sub 有什么区别
- 327浏览 收藏
-
- 数据库 · Redis | 1天前 |
- Redis LATENCY DOCTOR 怎么判断延迟来源
- 169浏览 收藏
-
- 数据库 · Redis | 1天前 |
- Redis ACL 怎么同时限制命令和键前缀
- 244浏览 收藏
-
- 数据库 · Redis | 1天前 |
- Redis Functions 怎么替代需要重复加载的 Lua 脚本
- 177浏览 收藏
-
- 数据库 · Redis | 1天前 |
- Redis 有序集合按分值和字典序查询有什么区别
- 411浏览 收藏
查看更多
课程推荐
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
查看更多
AI推荐
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 256次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 299次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 275次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 254次使用
-
- MMBench
- MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
- 61次使用
查看更多
相关文章
-
- Redis Stream XTRIM 如何避免消费组积压无限增长
- 2026-09-12 501浏览
-
- Redis AOF rewrite 期间如何判断磁盘与内存压力
- 2026-09-12 501浏览
-
- Redis RDB 和 AOF 怎么按可接受数据丢失量选择
- 2026-09-08 501浏览
-
- Redis XAUTOCLAIM 之后为什么仍有 pending:JUSTID、PEL 与消息删除边界
- 2026-08-29 501浏览
-
- Redis SET 的 GET 与 KEEPTTL 怎么一起验收:旧值返回、续期与回滚边界
- 2026-08-20 501浏览
