缓存三兄弟穿透、击穿、雪崩:我们线上数据库被打挂的那晚,3 个方案只救活了 1 个
上个月大促前做一次压测我把商品详情服务的 Redis 缓存整个清空想验证无缓存冷启动的数据库承压。结果脚本跑起来第 8 分钟DB 连接池告警、慢查询堆积MySQL 的 CPU 直接打到 100%。那一刻我才意识到缓存三兄弟——穿透、击穿、雪崩——不是三个名词是三种能把数据库直接送走的真实路径。这篇用我们那次的翻车现场把三种问题和对应的解法讲透并附上能直接抄的 Java 代码。先分清三兄弟到底差在哪很多人把缓存失效笼统叫缓存击穿其实三者触发条件完全不同穿透查一个数据库里根本不存在的 key比如 id-1 或已被删除的订单。请求每次都绕过缓存直接打到 DB缓存形同虚设。击穿某个热点 key 在过期瞬间恰好被高并发集中访问。大量请求同时发现缓存没了一起涌向 DB 重建缓存。雪崩大量 key 在同一时间段集中过期或 Redis 实例挂掉导致请求像雪崩一样全部砸向 DB。三者共同点只有一条请求最终落到了数据库。区别在为什么会落——穿透是 key 本就不该查 DB击穿是单点过期并发雪崩是多点同时失效。解法和代价也完全不同下面分开讲。缓存穿透空值和布隆过滤器两道闸穿透的本质是查不存在的数据。最简单的错误写法是直接查缓存、没有就查库// 错误示范穿透的源头 public Product getProduct(long id) { String cache redis.get(product: id); // 1. 缓存里没有 if (cache ! null) return parse(cache); Product p productMapper.selectById(id); // 2. 直接查库——id-1 也查 if (p ! null) redis.set(product: id, toJson(p), 300); // 3. 查到才回写 return p; // 4. 查不到就返回 null缓存依旧空 }逐行第 1 行查缓存不存在返回 null第 2 行不管 id 存不存在都查库攻击者用 id-1 或随机大 id 狂打DB 被无意义的查询淹没第 3 行只有查到才回写所以查不到的 key 永远不会进缓存下一次同样的非法请求还是打到 DB。这就是穿透——缓存对非法 key 没有防御能力。解法一缓存空值。查到 null 也写一份短过期比如 60 秒的空标记让后续请求在缓存层被挡住。// 解法一空值缓存 public Product getProductSafe(long id) { String cache redis.get(product: id); if (cache ! null) { return NULL.equals(cache) ? null : parse(cache); // 1. 空标记直接返回 null } Product p productMapper.selectById(id); if (p ! null) { redis.set(product: id, toJson(p), 300); // 2. 真值回写 } else { redis.set(product: id, NULL, 60); // 3. 空标记短过期防误删后长期穿透 } return p; }逐行第 1 行如果缓存是 NULL 标记直接返回不再查库第 3 行把查不到的结果也写入缓存60 秒过期是为了避免数据其实刚插入、却被空标记挡住的一致性问题。空值缓存成本极低但有个隐患如果攻击者用海量不同的非法 id缓存里会堆满无用的空标记浪费内存。解法二布隆过滤器拦在缓存之前。我们最终用的是 Redisson 的RBloomFilter在写入真实数据时同步加进过滤器查询前先问过滤器这个 id 可能存在吗。// 解法二布隆过滤器前置拦截 RBloomFilterLong bf redisson.getBloomFilter(product:ids); bf.tryInit(1000000L, 0.01); // 1. 预计 100 万元素误判率 1% public Product getProductWithBf(long id) { if (!bf.contains(id)) return null; // 2. 一定不存在直接挡住 // 3. 可能存在有误判可能走空值缓存 查库流程 return getProductSafe(id); }逐行第 1 行tryInit设定容量和误判率布隆过滤器用位数组多个哈希函数判断一定不存在/可能存在第 2 行返回 false 表示一定不存在这一步能挡掉绝大多数非法请求缓存层几乎碰不到穿透流量。注意布隆过滤器有误判可能说存在但其实没有所以第 3 行还要接空值缓存兜底。我们组合布隆过滤器 空值缓存后那次压测里 DB 的无效查询从每秒 4 万降到个位数。缓存击穿单点热 key 过期的并发重建击穿发生在热点 key 过期那一瞬。比如首页爆款商品缓存 300 秒过期瞬间几百个并发请求同时发现缓存没了一起查库重建——DB 被一拥而上的查询打穿。解法一互斥锁。只有一个线程能去查库重建其余线程等待或返回旧值。// 解法一分布式互斥锁重建击穿 private static final String LOCK_PREFIX lock:product:; public Product getWithLock(long id) { String cache redis.get(product: id); if (cache ! null) return parse(cache); // 1. 缓存还在直接返回 String lockKey LOCK_PREFIX id; String uuid UUID.randomUUID().toString(); try { boolean locked redis.setnx(lockKey, uuid, 30); // 2. 抢锁30 秒自动过期防死锁 if (locked) { Product p productMapper.selectById(id); // 3. 只有抢到锁的线程查库 redis.set(product: id, toJson(p), 300); // 4. 重建缓存 return p; } else { Thread.sleep(50); // 5. 没抢到短暂等待后重试 return getWithLock(id); } } finally { if (uuid.equals(redis.get(lockKey))) redis.del(lockKey); // 6. 只删自己的锁 } }逐行第 2 行setnx抢锁用唯一 uuid 防止误删别人的锁第 3 行只有持锁线程查库把几百个并发查库压成1 个查库第 5 行没抢到的线程睡 50 毫秒重试拿到刚建好的缓存第 6 行finally里校验 uuid 才删锁避免把别人刚抢到的锁删了。这是我们线上主用方案简单可靠。解法二逻辑过期不设物理 TTL值里带过期时间。适合数据可以短暂不一致、但不能阻塞的场景比如排行榜。它的好处是不用抢锁坏处是重建期间可能返回旧数据。// 解法二逻辑过期不阻塞返回旧值 class LogicalValue { Object data; long expireAt; } public Product getLogical(long id) { LogicalValue v parse(redis.get(product: id)); if (v null) return getWithLock(id); // 1. 真没有才走锁重建 if (v.expireAt System.currentTimeMillis()) return (Product) v.data; // 2. 没过期返回 // 3. 逻辑过期开新线程重建当前请求返回旧值 executor.submit(() - { if (redis.setnx(rebuild: id, 1, 20)) redis.set(product: id, wrap(productMapper.selectById(id))); }); return (Product) v.data; }逐行第 2 行没过期直接返回第 3 行过期了不阻塞用户而是异步提交重建任务、当前请求仍然返回旧数据。代价是重建完成前用户看到的是旧值——对价格、库存这类强一致字段我们不这么做只用在对一致性要求低的展示数据上。缓存雪崩别让 key 一起死雪崩是大量 key 同时失效。最常见诱因是统一设了相同 TTL比如全部 300 秒到点一起过期。解法核心是打散过期时间 兜底。// 解法TTL 加随机抖动避免集中过期 int base 300; // 1. 基础 300 秒 int jitter new Random().nextInt(120); // 2. 0~120 秒随机抖动 redis.set(product: id, value, base jitter); // 3. 实际过期 300~420 秒错峰逐行第 2 行生成 0 到 120 秒的随机值第 3 行每个 key 的过期时间在基础值上浮动把同一时刻集体过期拆成几分钟内陆续过期DB 不会瞬间承压。除此之外雪崩还有两个工程手段其一是多级缓存本地 Caffeine RedisRedis 挂了本地还能扛一部分其二是熔断降级DB 压力过大时直接返回默认页或走限流别让请求无脑打到库里。我们那晚翻车的复盘回到开头的压测事故。根因是脚本清缓存后几千并发同时查不存在的商品 id穿透 部分热点 key 过期击穿三兄弟在同一时间窗口叠满DB 连接池被占满。我们当晚的修复顺序先上一道布隆过滤器把非法 id 在网关层挡掉 90% 的穿透流量热点 key 加互斥锁重建击穿的并发查库压成单查TTL 全部加随机抖动并给核心接口加 Sentinel 熔断DB 压力大时直接降级。救活的是第 1 步——布隆过滤器一上DB QPS 从 4 万掉到 3000 以内雪崩和击穿的压力随之瓦解。空值缓存和逻辑过期我们在非核心接口上才用核心交易链路只用锁重建 多级缓存因为那里不能接受返回旧值。我的取舍别把三个问题用一套方案糊弄我的观点很明确穿透用布隆过滤器 空值缓存组合击穿用互斥锁优先于逻辑过期雪崩用TTL 抖动 熔断。不建议为了省事只上一道空值缓存应对所有场景——空值缓存挡不住雪崩key 是真存在的只是同时过期也挡不住高误判场景下的内存浪费。我更不建议在交易链路上用逻辑过期旧值返回引发的差错比缓存击穿本身更难查。方案选型就一句话先看请求为什么落到 DB再对症下药的分别处理而不是找一个万能缓存框架指望它全包。思考题假设你的热点 key 缓存时间设 300 秒但数据每 10 秒就会变一次比如实时库存。互斥锁重建和逻辑过期两种方案哪种更不合适为什么如果要兼顾不击穿和数据不太旧你会怎么组合写在最后缓存三兄弟不是考试题是三种能把数据库打挂的真实路径。穿透是查不存在的数据、击穿是单点过期并发、雪崩是多点同时失效。我们那晚的教训是别等压测才想起它们上线前就该按请求为什么落 DB把三道防线布好。布隆过滤器挡穿透、互斥锁挡击穿、TTL 抖动加熔断挡雪崩三道闸各管一摊DB 才稳得住。

相关新闻

OpenObserve生产环境安全加固指南:TLS加密与身份验证实战

OpenObserve生产环境安全加固指南:TLS加密与身份验证实战

1. 项目概述:为什么OpenObserve的安全配置不容忽视?最近在部署和运维OpenObserve时,我花了大量时间研究其安全配置,特别是TLS加密和身份验证这块。OpenObserve作为一个新兴的、主打高性能和高性价比的可观测性平台,其轻…

2026/7/29 15:41:28 阅读更多 →
Calibre中文路径保护终极指南:4步彻底告别拼音目录烦恼

Calibre中文路径保护终极指南:4步彻底告别拼音目录烦恼

Calibre中文路径保护终极指南:4步彻底告别拼音目录烦恼 【免费下载链接】calibre-do-not-translate-my-path Switch my calibre library from ascii path to plain Unicode path. 将我的书库从拼音目录切换至非纯英文(中文)命名 项目地址: …

2026/7/29 15:41:28 阅读更多 →
ESP32-S3驱动VGA显示器:I2S+DMA方案实现与优化

ESP32-S3驱动VGA显示器:I2S+DMA方案实现与优化

1. 项目概述:当ESP32-S3遇上VGA最近在捣鼓FireBeetle 2这块板子,核心是ESP32-S3,性能比之前的ESP32强不少,双核240MHz,还带PSRAM。我琢磨着,能不能用它来点“复古”的玩法,比如驱动一个VGA显示器…

2026/7/29 15:41:28 阅读更多 →

最新新闻

AP0316集成功放模组:扬声器与麦克风同腔设计下的AEC与DSP协同优化

AP0316集成功放模组:扬声器与麦克风同腔设计下的AEC与DSP协同优化

一、扬声器与麦克风同腔设计的声学挑战在传统的免提通话方案中,扬声器单元和麦克风单元通常被物理隔离(分腔设计),以避免扬声器播放声音直接耦合进入麦克风造成声反馈。这种分离设计虽然简化了回音消除的压力,但增加了…

2026/7/29 15:50:42 阅读更多 →
无线编程模块测试全攻略:从原理到实践,打造稳定可靠的OTA升级

无线编程模块测试全攻略:从原理到实践,打造稳定可靠的OTA升级

1. 项目缘起:为什么我们需要关注无线编程模块的测试? 如果你玩过Arduino、ESP32这类开源硬件,肯定对“烧录程序”这个步骤不陌生。通常,我们得用一根USB线,把开发板连到电脑上,点击IDE里的上传按钮&#xf…

2026/7/29 15:50:42 阅读更多 →
为什么说GBFR-Logs是你提升《Granblue Fantasy: Relink》战斗效率的终极神器?

为什么说GBFR-Logs是你提升《Granblue Fantasy: Relink》战斗效率的终极神器?

为什么说GBFR-Logs是你提升《Granblue Fantasy: Relink》战斗效率的终极神器? 【免费下载链接】gbfr-logs GBFR Logs lets you track damage statistics with a nice overlay DPS meter for Granblue Fantasy: Relink. 项目地址: https://gitcode.com/gh_mirrors/…

2026/7/29 15:50:42 阅读更多 →
英雄联盟Akari助手:从青铜到王者的智能游戏伙伴终极指南

英雄联盟Akari助手:从青铜到王者的智能游戏伙伴终极指南

英雄联盟Akari助手:从青铜到王者的智能游戏伙伴终极指南 【免费下载链接】League-Toolkit An all-in-one toolkit for LeagueClient. Gathering power 🚀. 项目地址: https://gitcode.com/gh_mirrors/le/League-Toolkit 还在为英雄联盟中繁琐的准…

2026/7/29 15:50:42 阅读更多 →
MATLAB/Simulink中UPFC与PST的建模与仿真实践

MATLAB/Simulink中UPFC与PST的建模与仿真实践

1. 项目背景与核心价值 在电力系统分析与控制领域,灵活交流输电系统(FACTS)设备正逐渐成为现代电网不可或缺的组成部分。其中统一潮流控制器(UPFC)和相移变压器(PST)作为两种典型的FACTS装置&am…

2026/7/29 15:50:42 阅读更多 →
GetQzonehistory完整教程:一键备份QQ空间所有历史数据

GetQzonehistory完整教程:一键备份QQ空间所有历史数据

GetQzonehistory完整教程:一键备份QQ空间所有历史数据 【免费下载链接】GetQzonehistory 获取QQ空间发布的历史说说 项目地址: https://gitcode.com/GitHub_Trending/ge/GetQzonehistory 想要完整保存QQ空间里的珍贵回忆吗?GetQzonehistory是一个…

2026/7/29 15:49:41 阅读更多 →

日新闻

【RT-DETR多模态创新改进】CVPR 2025 | 独家特征融合创新改进篇 | 引入RLAB残差线性注意力模块,有效融合并强调多尺度特征,多种改进点,适合红外与可见光融合目标检测任务,有效涨点

【RT-DETR多模态创新改进】CVPR 2025 | 独家特征融合创新改进篇 | 引入RLAB残差线性注意力模块,有效融合并强调多尺度特征,多种改进点,适合红外与可见光融合目标检测任务,有效涨点

一、本文介绍 🔥本文在RT-DETR多模态融合目标检测中引入RLAB残差线性注意力模块,可在不同模态特征交互阶段进行多次残差细化,使可见光、红外等特征在尺度、语义和空间位置上更好对齐;随后将细化特征与解码器输出拼接并生成Q、K、V,通过线性注意力自适应强化关键通道、目…

2026/7/29 0:00:23 阅读更多 →
AI编程系列02:合并知识功能,给 AI 问数和 RAG 场景打基础

AI编程系列02:合并知识功能,给 AI 问数和 RAG 场景打基础

AI编程系列02:合并知识功能,给 AI 问数和 RAG 场景打基础 在上一期「AI编程系列」中,我们学习了如何构建一个基础的 AI 问答系统,通过简单的输入输出让模型回应问题。但现实世界中的 AI 应用往往需要处理更复杂的场景:…

2026/7/29 0:00:23 阅读更多 →
AI智能体开发实战:从工具调用到企业级部署

AI智能体开发实战:从工具调用到企业级部署

1. 从被动问答到主动执行:AI Agent的范式转变过去两年,大语言模型最显著的应用形态是聊天机器人——用户提问,AI回答。但真正的生产力革命发生在2023年下半年:当AI学会主动调用工具完成任务时,生产力工具的历史被彻底改…

2026/7/29 0:00:23 阅读更多 →

周新闻

深度学习道路桥梁裂缝检测系统 道路桥梁裂缝检测数据集 道路桥梁病害识别检测数据集

深度学习道路桥梁裂缝检测系统 道路桥梁裂缝检测数据集 道路桥梁病害识别检测数据集

深度学习道路桥梁裂缝检测系统 数据集6000张 完整源码已标注数据集训练好的模型环境配置教程程序运行说明文档,可以直接使用!系统支持图片、视频、摄像头等多种方式检测裂缝,功能强大实用。 1数据集6000张 8各类别

2026/7/28 12:04:22 阅读更多 →
深度学习YOLO模型如何训练 PUBG 绝地求生目标检测数据集

深度学习YOLO模型如何训练 PUBG 绝地求生目标检测数据集

pubg数据集 精选原图1.42万数据 1.49万标签 无任何重复、算法增强或冗余图像! pubg绝地求生目标检测数据集 1分类:e_body,14905个标签,txt格式 共计14244张图,99%为640*640尺寸图像 适合yolo目标检测、AI训练关键词&am…

2026/7/29 14:34:28 阅读更多 →
Apex英雄目标检测数据集 深度学习框架YOLO如何训练APEX数据集

Apex英雄目标检测数据集 深度学习框架YOLO如何训练APEX数据集

Apex检测数据集数据集详情检测类别: allies enemy tag图片总量:7247张训练集:5139张验证集:1425张测试集:683张标注状态:全部已标注,即拿即用数据格式:支持YOLO格式及其他格式&#…

2026/7/29 15:00:03 阅读更多 →

月新闻