缓存三兄弟穿透、击穿、雪崩:我们线上数据库被打挂的那晚,3 个方案只救活了 1 个
上个月大促前做一次压测我把商品详情服务的 Redis 缓存整个清空想验证无缓存冷启动的数据库承压。结果脚本跑起来第 8 分钟DB 连接池告警、慢查询堆积MySQL 的 CPU 直接打到 100%。那一刻我才意识到缓存三兄弟——穿透、击穿、雪崩——不是三个名词是三种能把数据库直接送走的真实路径。这篇用我们那次的翻车现场把三种问题和对应的解法讲透并附上能直接抄的 Java 代码。先分清三兄弟到底差在哪很多人把缓存失效笼统叫缓存击穿其实三者触发条件完全不同穿透查一个数据库里根本不存在的 key比如 id-1 或已被删除的订单。请求每次都绕过缓存直接打到 DB缓存形同虚设。击穿某个热点 key 在过期瞬间恰好被高并发集中访问。大量请求同时发现缓存没了一起涌向 DB 重建缓存。雪崩大量 key 在同一时间段集中过期或 Redis 实例挂掉导致请求像雪崩一样全部砸向 DB。三者共同点只有一条请求最终落到了数据库。区别在为什么会落——穿透是 key 本就不该查 DB击穿是单点过期并发雪崩是多点同时失效。解法和代价也完全不同下面分开讲。缓存穿透空值和布隆过滤器两道闸穿透的本质是查不存在的数据。最简单的错误写法是直接查缓存、没有就查库// 错误示范穿透的源头 public Product getProduct(long id) { String cache redis.get(product: id); // 1. 缓存里没有 if (cache ! null) return parse(cache); Product p productMapper.selectById(id); // 2. 直接查库——id-1 也查 if (p ! null) redis.set(product: id, toJson(p), 300); // 3. 查到才回写 return p; // 4. 查不到就返回 null缓存依旧空 }逐行第 1 行查缓存不存在返回 null第 2 行不管 id 存不存在都查库攻击者用 id-1 或随机大 id 狂打DB 被无意义的查询淹没第 3 行只有查到才回写所以查不到的 key 永远不会进缓存下一次同样的非法请求还是打到 DB。这就是穿透——缓存对非法 key 没有防御能力。解法一缓存空值。查到 null 也写一份短过期比如 60 秒的空标记让后续请求在缓存层被挡住。// 解法一空值缓存 public Product getProductSafe(long id) { String cache redis.get(product: id); if (cache ! null) { return NULL.equals(cache) ? null : parse(cache); // 1. 空标记直接返回 null } Product p productMapper.selectById(id); if (p ! null) { redis.set(product: id, toJson(p), 300); // 2. 真值回写 } else { redis.set(product: id, NULL, 60); // 3. 空标记短过期防误删后长期穿透 } return p; }逐行第 1 行如果缓存是 NULL 标记直接返回不再查库第 3 行把查不到的结果也写入缓存60 秒过期是为了避免数据其实刚插入、却被空标记挡住的一致性问题。空值缓存成本极低但有个隐患如果攻击者用海量不同的非法 id缓存里会堆满无用的空标记浪费内存。解法二布隆过滤器拦在缓存之前。我们最终用的是 Redisson 的RBloomFilter在写入真实数据时同步加进过滤器查询前先问过滤器这个 id 可能存在吗。// 解法二布隆过滤器前置拦截 RBloomFilterLong bf redisson.getBloomFilter(product:ids); bf.tryInit(1000000L, 0.01); // 1. 预计 100 万元素误判率 1% public Product getProductWithBf(long id) { if (!bf.contains(id)) return null; // 2. 一定不存在直接挡住 // 3. 可能存在有误判可能走空值缓存 查库流程 return getProductSafe(id); }逐行第 1 行tryInit设定容量和误判率布隆过滤器用位数组多个哈希函数判断一定不存在/可能存在第 2 行返回 false 表示一定不存在这一步能挡掉绝大多数非法请求缓存层几乎碰不到穿透流量。注意布隆过滤器有误判可能说存在但其实没有所以第 3 行还要接空值缓存兜底。我们组合布隆过滤器 空值缓存后那次压测里 DB 的无效查询从每秒 4 万降到个位数。缓存击穿单点热 key 过期的并发重建击穿发生在热点 key 过期那一瞬。比如首页爆款商品缓存 300 秒过期瞬间几百个并发请求同时发现缓存没了一起查库重建——DB 被一拥而上的查询打穿。解法一互斥锁。只有一个线程能去查库重建其余线程等待或返回旧值。// 解法一分布式互斥锁重建击穿 private static final String LOCK_PREFIX lock:product:; public Product getWithLock(long id) { String cache redis.get(product: id); if (cache ! null) return parse(cache); // 1. 缓存还在直接返回 String lockKey LOCK_PREFIX id; String uuid UUID.randomUUID().toString(); try { boolean locked redis.setnx(lockKey, uuid, 30); // 2. 抢锁30 秒自动过期防死锁 if (locked) { Product p productMapper.selectById(id); // 3. 只有抢到锁的线程查库 redis.set(product: id, toJson(p), 300); // 4. 重建缓存 return p; } else { Thread.sleep(50); // 5. 没抢到短暂等待后重试 return getWithLock(id); } } finally { if (uuid.equals(redis.get(lockKey))) redis.del(lockKey); // 6. 只删自己的锁 } }逐行第 2 行setnx抢锁用唯一 uuid 防止误删别人的锁第 3 行只有持锁线程查库把几百个并发查库压成1 个查库第 5 行没抢到的线程睡 50 毫秒重试拿到刚建好的缓存第 6 行finally里校验 uuid 才删锁避免把别人刚抢到的锁删了。这是我们线上主用方案简单可靠。解法二逻辑过期不设物理 TTL值里带过期时间。适合数据可以短暂不一致、但不能阻塞的场景比如排行榜。它的好处是不用抢锁坏处是重建期间可能返回旧数据。// 解法二逻辑过期不阻塞返回旧值 class LogicalValue { Object data; long expireAt; } public Product getLogical(long id) { LogicalValue v parse(redis.get(product: id)); if (v null) return getWithLock(id); // 1. 真没有才走锁重建 if (v.expireAt System.currentTimeMillis()) return (Product) v.data; // 2. 没过期返回 // 3. 逻辑过期开新线程重建当前请求返回旧值 executor.submit(() - { if (redis.setnx(rebuild: id, 1, 20)) redis.set(product: id, wrap(productMapper.selectById(id))); }); return (Product) v.data; }逐行第 2 行没过期直接返回第 3 行过期了不阻塞用户而是异步提交重建任务、当前请求仍然返回旧数据。代价是重建完成前用户看到的是旧值——对价格、库存这类强一致字段我们不这么做只用在对一致性要求低的展示数据上。缓存雪崩别让 key 一起死雪崩是大量 key 同时失效。最常见诱因是统一设了相同 TTL比如全部 300 秒到点一起过期。解法核心是打散过期时间 兜底。// 解法TTL 加随机抖动避免集中过期 int base 300; // 1. 基础 300 秒 int jitter new Random().nextInt(120); // 2. 0~120 秒随机抖动 redis.set(product: id, value, base jitter); // 3. 实际过期 300~420 秒错峰逐行第 2 行生成 0 到 120 秒的随机值第 3 行每个 key 的过期时间在基础值上浮动把同一时刻集体过期拆成几分钟内陆续过期DB 不会瞬间承压。除此之外雪崩还有两个工程手段其一是多级缓存本地 Caffeine RedisRedis 挂了本地还能扛一部分其二是熔断降级DB 压力过大时直接返回默认页或走限流别让请求无脑打到库里。我们那晚翻车的复盘回到开头的压测事故。根因是脚本清缓存后几千并发同时查不存在的商品 id穿透 部分热点 key 过期击穿三兄弟在同一时间窗口叠满DB 连接池被占满。我们当晚的修复顺序先上一道布隆过滤器把非法 id 在网关层挡掉 90% 的穿透流量热点 key 加互斥锁重建击穿的并发查库压成单查TTL 全部加随机抖动并给核心接口加 Sentinel 熔断DB 压力大时直接降级。救活的是第 1 步——布隆过滤器一上DB QPS 从 4 万掉到 3000 以内雪崩和击穿的压力随之瓦解。空值缓存和逻辑过期我们在非核心接口上才用核心交易链路只用锁重建 多级缓存因为那里不能接受返回旧值。我的取舍别把三个问题用一套方案糊弄我的观点很明确穿透用布隆过滤器 空值缓存组合击穿用互斥锁优先于逻辑过期雪崩用TTL 抖动 熔断。不建议为了省事只上一道空值缓存应对所有场景——空值缓存挡不住雪崩key 是真存在的只是同时过期也挡不住高误判场景下的内存浪费。我更不建议在交易链路上用逻辑过期旧值返回引发的差错比缓存击穿本身更难查。方案选型就一句话先看请求为什么落到 DB再对症下药的分别处理而不是找一个万能缓存框架指望它全包。思考题假设你的热点 key 缓存时间设 300 秒但数据每 10 秒就会变一次比如实时库存。互斥锁重建和逻辑过期两种方案哪种更不合适为什么如果要兼顾不击穿和数据不太旧你会怎么组合写在最后缓存三兄弟不是考试题是三种能把数据库打挂的真实路径。穿透是查不存在的数据、击穿是单点过期并发、雪崩是多点同时失效。我们那晚的教训是别等压测才想起它们上线前就该按请求为什么落 DB把三道防线布好。布隆过滤器挡穿透、互斥锁挡击穿、TTL 抖动加熔断挡雪崩三道闸各管一摊DB 才稳得住。

相关新闻

OpenObserve生产环境安全加固指南:TLS加密与身份验证实战

OpenObserve生产环境安全加固指南:TLS加密与身份验证实战

1. 项目概述:为什么OpenObserve的安全配置不容忽视?最近在部署和运维OpenObserve时,我花了大量时间研究其安全配置,特别是TLS加密和身份验证这块。OpenObserve作为一个新兴的、主打高性能和高性价比的可观测性平台,其轻…

2026/10/16 10:29:24 阅读更多 →
Calibre中文路径保护终极指南:4步彻底告别拼音目录烦恼

Calibre中文路径保护终极指南:4步彻底告别拼音目录烦恼

Calibre中文路径保护终极指南:4步彻底告别拼音目录烦恼 【免费下载链接】calibre-do-not-translate-my-path Switch my calibre library from ascii path to plain Unicode path. 将我的书库从拼音目录切换至非纯英文(中文)命名 项目地址: …

2026/10/9 8:27:14 阅读更多 →
ESP32-S3驱动VGA显示器:I2S+DMA方案实现与优化

ESP32-S3驱动VGA显示器:I2S+DMA方案实现与优化

1. 项目概述:当ESP32-S3遇上VGA最近在捣鼓FireBeetle 2这块板子,核心是ESP32-S3,性能比之前的ESP32强不少,双核240MHz,还带PSRAM。我琢磨着,能不能用它来点“复古”的玩法,比如驱动一个VGA显示器…

2026/10/14 2:47:57 阅读更多 →

最新新闻

刻蚀设备PM后首件:为什么总是不稳定

刻蚀设备PM后首件:为什么总是不稳定

一、痛点背景:从一次真实的生产事故说起刻蚀设备PM后首件:为什么总是不稳定这个问题,在FAB里不是一天两天了。我见过太多工程师踩坑:要么是方法用错导致数据误判,要么是工具选型失误导致项目延期,要么是流程…

2026/10/17 6:33:58 阅读更多 →
工程师副业的边界:竞业与合规红线

工程师副业的边界:竞业与合规红线

一、痛点背景:从一次真实的生产事故说起工程师副业的边界:竞业与合规红线这个问题,在FAB里不是一天两天了。我见过太多工程师踩坑:要么是方法用错导致数据误判,要么是工具选型失误导致项目延期,要么是流程设…

2026/10/17 6:33:58 阅读更多 →
从专利数据到流程创新占比:1988-2025年上市公司指标构建全解

从专利数据到流程创新占比:1988-2025年上市公司指标构建全解

做创新经济学实证研究的人,看到“1988-2025年上市公司流程创新占比数据”这个项目名,第一反应通常不是“数据在哪”,而是一连串概念问题:流程创新到底怎么界定?占比的分母是专利总数、研发支出还是别的?198…

2026/10/17 6:33:58 阅读更多 →
小程序更新维护实战:从公告撰写到问题排查的完整复盘

小程序更新维护实战:从公告撰写到问题排查的完整复盘

1. 公告背后的背景与核心需求解析做小程序维护的人应该都有这种体会:真正让人紧张的往往不是新功能上线,而是老版本用户向你涌来的那一波反馈。前段时间我社就经历了一轮这样的考验——针对早期发布的小程序做了一次集中更新,同时处理了一批积…

2026/10/17 6:33:57 阅读更多 →
EdrawMax 6.8 绿色便携版:临时画图场景的免安装制图方案

EdrawMax 6.8 绿色便携版:临时画图场景的免安装制图方案

简介:亿图图示(EdrawMax)6.8中文绿色便携版是一份免安装、可直接运行的图形设计工具,面向需要快速绘制专业图表的职场人士、学生及自由创作者,适用于工作汇报、学术研究、灵感记录等场景。压缩包约48.81MB,…

2026/10/17 6:33:57 阅读更多 →
Claude Code 模板库实战:从提示词到可复用工程资产

Claude Code 模板库实战:从提示词到可复用工程资产

最近这段时间,Claude Code 在开发圈里的讨论热度一直没降。很多人用完第一反应是“这玩意儿确实能干活”,可真到上手的时候,又会觉得它不稳定、答非所问、改错文件。我观察到一个很关键的分水岭:那些用得顺的人,几乎都…

2026/10/17 6:32:57 阅读更多 →

日新闻

DeepSeek选型与部署:V3/R1、Ollama、API全攻略

DeepSeek选型与部署:V3/R1、Ollama、API全攻略

简介:《DeepSeek使用方法.pdf》是一份面向DeepSeek入门及进阶用户的完整使用指南,重点围绕V3与R1两款模型的能力差异与适用场景展开,帮助读者根据任务类型与成本选择合适的模型。资源共1个PDF文件,压缩包大小约311KB,篇…

2026/10/17 0:00:25 阅读更多 →
200+Deepseek润色指令拆解:从底层原理到场景落地的完整指南

200+Deepseek润色指令拆解:从底层原理到场景落地的完整指南

简介:这是一份聚焦DeepSeek提示词优化的《200Deepseek润色指令》PDF文档,共收录两百余条可直接套用的润色指令,涵盖语法修正、风格统一、逻辑梳理、表达精炼等维度,并针对商务写作、学术论文、广告文案等场景给出差异化建议。文档…

2026/10/17 0:00:25 阅读更多 →
OpenCV轮廓法物体计数系统:轻量、可控、可落地的工业级实现

OpenCV轮廓法物体计数系统:轻量、可控、可落地的工业级实现

简介:本资源是一份基于OpenCV的本科课程设计完整报告,面向计算机视觉初学者、图像处理学习者及高校通信/信息类专业学生,解决物体智能计数与检测结果结构化记录的实际问题。项目覆盖图像预处理、轮廓检测、边界框绘制、轨迹栏交互式参数调节、…

2026/10/17 0:00:25 阅读更多 →

周新闻

流感时间序列预测实战:ARIMA/LSTM全流程拆解与避坑指南

流感时间序列预测实战:ARIMA/LSTM全流程拆解与避坑指南

简介:基于 ARIMA、LSTM、Transformer 等模型的流感时间序列预测 Python 源码,面向计算机相关专业课程设计与期末大作业学生,以及项目实战学习者。内容覆盖预处理、平稳性检验、定阶、残差分析、多模型对比预测的完整时序建模流程,…

2026/10/16 21:35:51 阅读更多 →
影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别

影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别

影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别 做影刀RPA自动化,十个新手有八个栽在"往输入框里填东西"这件事上:要么填不进去,要么填了一半,要么直接把原来内容追加在后面。这背后的根因&…

2026/10/17 1:44:59 阅读更多 →
影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容

影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容

影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容 1. 认识影刀:什么场景该用RPA采小说数据 起点中文网的页面结构相对稳定——分类榜单、书籍详情、章节内容三块独立页面,跳转链路清晰。这种场景非常适合影刀自动化&#x…

2026/10/16 15:04:24 阅读更多 →

月新闻

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/16 21:54:38 阅读更多 →
Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/16 3:49:43 阅读更多 →
黑夜航拍船只数据集训练YOLOV5模型全流程解析

黑夜航拍船只数据集训练YOLOV5模型全流程解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/16 14:23:36 阅读更多 →