缓存穿透、击穿、雪崩、热点key问题

最新推荐文章于 2025-01-25 16:01:37 发布
原创 最新推荐文章于 2025-01-25 16:01:37 发布 · 243 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#缓存穿透 #缓存击穿 #缓存雪崩 #热点kkey

本文深入探讨了缓存系统中常见的四大问题：缓存穿透、缓存击穿、缓存雪崩与热点数据失效，针对每种问题提出了有效的解决方案，包括缓存空值、BloomFilter、互斥锁等技术手段。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

参考来源：

缓存世界中的三大问题及解决方案

关于【缓存穿透、缓存击穿、缓存雪崩、热点数据失效】问题的解决方案

 

 定义问题解决方案
缓存穿透

业务系统访问缓存和数据库都查询不到的数据。

 

发生情况：

1.恶意攻击，故意营造大量不存在的数据请求

2.代码逻辑错误

请求都会落到数据库中，数据库压力剧增

1.缓存空值

将数据库查询结果为空的key也存储在缓存中

场景：空数据的key数量有限、key重复请求概率较高

 

2.BloomFilter

BloomFilter存储目前数据库中存在的所有key

当业务系统有查询请求的时候，首先去BloomFilter中查询该key是否存在。若不存在，直接返回null。若存在，则继续执行后续的流程。

场景：空数据的key各不相同、key重复请求概率低

缓存击穿大量的请求同时查询一个 key 时，此时这个key正好失效了，就会导致大量的请求都打到数据库上面去。造成某一时刻数据库请求量过大，压力剧增将热点数据设置为永远不过期；或者基于 redis or zookeeper 实现互斥锁，等待第一个请求构建完缓存之后，再释放锁，进而其它请求才能通过该 key 访问数据。
缓存雪崩

某一时刻发生大规模的缓存失效的情况

例：缓存服务宕机

大量的请求进来直接打到DB上面，DB直接挂掉

1.事前

  • 使用集群缓存，保证缓存服务的高可用

2.事中

3.事后

  • 开启Redis持久化机制，尽快恢复缓存集群

热点key缓存会设定一个失效时间，但一些请求量极高的热点数据而言，一旦过了有效时间，此刻将会有大量请求落在数据库上可能会导致数据库崩溃

1.互斥锁

在第一个请求去查询数据库的时候对他加一个互斥锁，其余的查询请求都会被阻塞住，直到锁被释放，从而保护数据库。

但是也是由于它会阻塞其他的线程，此时系统吞吐量会下降。需要结合实际的业务去考虑是否要这么做。

 

2.设置不同的失效时间

在设置缓存过期时间的时候，让失效的时间错开。如：在一个基础时间上加/减一个随机数

 

redis热点key解决方案_缓存穿透，缓存雪崩，4种解决方案分析
weixin_39670464的博客
11-25 467
前言设计一个缓存系统，不得不要考虑的问题就是：缓存穿透、缓存击穿与失效时的雪崩效应。缓存穿透缓存穿透是指查询一个一定不存在的数据，由于缓存是不命中时被动写的，并且出于容错考虑，如果从存储层查不到数据则不写入缓存，这将导致这个不存在的数据每次请求都要到存储层去查询，失去了缓存的意义。在流量大时，可能DB就挂掉了，要是有人利用不存在的key频繁攻击我们的应用，这就是漏洞。解决方案有很多种方法...
详解缓存穿透、缓存雪崩、缓存击穿
热门推荐
琅枫的博客
07-19 5万+
在现代软件架构中，缓存的应用已经非常普及。缓存的使用在面试和实践中都是避不开的硬技能、硬知识，如果你说还不太熟悉缓存的使用，可能都不好意思说自己是程序员。 当我们使用缓存时，目标通常有两个：第一，提升响应效率和并发量；第二，减轻数据库的压力。...
redis关于缓存雪崩和缓存穿透，热点key
AAAAAxiaobai的博客
11-16 644
穿透 穿透：频繁查询一个不存在的数据，由于缓存不命中，每次都要查询持久层。从而失去缓存的意义。 解决办法： 持久层查询不到就缓存空结果，查询时先判断缓存中是否exists(key) ,如果有直接返回空，没有则查询后返回， 注意insert时需清除查询的key，否则即便DB中有值也查询不到(当然也可以设置空缓存的过期时间） 雪崩 雪崩：缓存大量失效的时候，引发大量查询数据库。 解决办法： ①用锁/分布式锁或者队列串行访问 ②缓存失效时间均匀分布 热点key 热点key:某个key访问非常频繁，当key失效的时
redis Hotkey和缓存雪崩，缓存击穿
qq_34999565的博客
02-04 393
缓存击穿是指，如果对某个热点数据的大量请求无法在缓存中进行处理，那么这些请求一下子都要到后端数据库去请求数据，导致了底层数据库压力激增，进而影响数据库处理其他请求。这种情况，经常发生在热点数据过期失效的时候，如下图所示： 问题的主要原因是某个热点的key失效了，导致大并发集中打在数据库上。所以要从两个方面解决， 延长热点key的过期时间或者设置永不过期，避免热点数据失效； 利用互斥锁保证同一时刻只有一个客户端可以查询底层数据库的这个数据，同时一旦查到数据就马上缓存至Redis内，避免其他大量请求.
什么是缓存穿透、缓存雪崩、缓存击穿，如何解决热key问题？
不会编程的派大星的博客
09-27 617
一、缓存穿透问题 作为后端的开发人员，我们会遇到这样一个常见的缓存使用方式：读请求来了，先查下缓存，缓存值有值就命中，就直接返回；如果缓存没有命中，就去查询数据库，然后把数据库的值更新到缓存，再返回。 1、缓存穿透是什么？ 缓存穿透： 指查询一个一定不存在的数据，由于缓存是不命中时需要从数据库查询，查不到数据则不写入缓存，这将导致这个不存在的数据每次请求都要到数据库去查询，进而给数据库带来压力。通俗点来讲，读请求访问时，缓存和数据库都没有这个值，这样就会导致每次对这个值的查询请求都会穿透到数据库，这就是缓
redis缓存雪崩、穿透、击穿、热点key分别代表什么
熊晓磊的博客
01-09 579
Redis逻辑 ：先从缓存取，缓存有就直接返回，没有就查库，查到就存Redis没有就返回空。 缓存穿透 是针对数据库和缓存中都没有的数据。场景：当客户端发起查询时，缓存中没有就会去查库，库里也没有就会返回给客户端错误信息。这样是没问题 逻辑没毛病，但是存在一个漏洞 那就是无论什么样的key过来查我们都去接受他的请求这样就会被黑客抓住发起大量请求。并且Key都是我们系统中没有的，库里也查不到对应的...
Redis缓存穿透击穿雪崩三大问题详解与场景还原
最新发布
07-12
缓存穿透：请求的数据在缓存和数据库都不存在，攻击者利用不存在 ID 轰炸，使 DB 压力飙升。 应对： 接口层鉴权并拦截 id≤0 等非法请求； 缓存写入 key-null，过期 30 秒； 布隆过滤器预置全部合法 ID，快速拒绝...
Redis缓存穿透，缓存击穿和缓存雪崩
12-14
然而，缓存系统在实际运行中可能会遇到几种常见问题，即缓存穿透、缓存击穿和缓存雪崩。下面将详细阐述这些问题以及相应的解决方案。 **缓存穿透** 缓存穿透是指用户请求的数据在缓存和数据库中均不存在，通常是...
Redis-缓存穿透、缓存雪崩、缓存击穿详解
m0_58684211的博客
01-25 1264
redis有关缓存穿透、缓存雪崩、缓存击穿的详解
Redis的缓存穿透、击穿、雪崩及解决方案
Kris_zwl的博客
06-09 1119
Redis的缓存穿透、击穿、雪崩是缓存机制中常见的问题，它们都可能对系统性能和可用性产生严重影响。通过合理的缓存策略、数据结构设计以及系统架构优化，可以有效地避免这些问题，提高系统的稳定性和性能。
缓存穿透、缓存击穿和缓存雪崩
a654540233的博客
03-24 958
1.缓存穿透 一次请求过来，根据参数去查，缓存中没有，数据库中也没有，就一直造成所有的请求直接都打到数据库，可能使数据库挂掉。 a.参数校验，直接拦截一部分非法参数的恶意请求 b.可以把不存在的key存到缓存中设为null，下次请求就可以走缓存返回null。 c.使用布隆过滤器，但是布隆过滤器最致命的问题是：如果数据库中的数据更新了，需要同步更新布隆过滤器。但它跟数据库是两个数据源，就可能存在数据不一致的情况。 2.缓存击穿 某一时刻热点key过期，假设此刻有很多请求，就会导致在缓存生成前所有的请求都直接打
redis缓存穿透、缓存雪崩、缓存击穿（热点Key）解决方案
感冒石头的博客
08-05 8421
redis缓存穿透：查询一个数据库中不存在的数据，比如商品详情，查询一个不存在的ID，每次都会访问DB，如果有人恶意破坏，很可能直接对DB造成过大地压力 解决方案：当通过某一个key去查询数据的时候，如果对应在数据库中的数据都不存在，我们将此key对应的value设置为一个默认的值，比如“NULL”，并设置一个缓存的失效时间，这时在缓存失效之前，所有通过此key的访问都被缓存挡住了。后面如果此ke...
redis缓存击穿、穿透、热点key、雪崩方案总结
w15868676598的博客
10-29 2924
缓存击穿 首先，在将缓存击穿前，大家先来回忆下自己写缓存的方案，这里我简单画了下流程图： 当我们缓存key设置过期时间，恰巧在这一刻这个key在某一刻被高并发的访问，把所有的请求都打到了DB中这就可能会导致DB挂了。这个跟后面说的缓存雪崩非常相似，这个和缓存雪崩的区别在于这里针对某一key缓存，但是雪崩则指的是多个key，要解决方案有很多，比如让一个线程构建缓存，另外线程等待知道构建好，或...
Redis缓存和数据库一致性、雪崩、穿透、热点key、big key
qq_56892136的博客
08-13 529
面对MYSQL的API进行编程，利用触发器进行缓存同步，但UDF主要是C/C++实现 学习成本高。
缓存数据一致性，雪崩，大Key，热Key问题解决方案
CoLiuRs
05-10 1375
使用缓存 为什么使用缓存 缓存就是数据交换的缓冲区（称作Cache），目的就是提高我们的接口性能，特别是那些需要大量CPU计算和I/O获取的数据。 使用缓存带来的问题 缓存虽然能够提高应用程序的性能，但也会带来一些问题。比如：缓存失效，缓存击穿，缓存雪崩，数据一致性问题 缓存雪崩 缓存失效为什么会带来问题呢？试想一下，单个的缓存失效其实并不会引发多大的问题，问题在于当大量的Key同时失效时，在高并发的情况下，大量的请求同时到数据库层，会给数据库层带来压力，从而引发其他的问题。 解决方案 优化过期时间 既然是
Redis——热点key问题
娜娜米的博客
06-06 1万+
本篇主要介绍Redis中的热点Key问题，包括热点Key产生的原因、如何监控发现热点key以及热点Key的解决方案；
分布式事务面试题
爱上在路上
08-18 1万+
概念 说明 分布式事务 横跨多个服务，操作多个数据库； 跨库、分库分表、分服务 DTP 模型 DTP模型的5个基本元素： 应用程序 AP 资源管理器 RM 事务管理器 TM 通信资源管理器 CRM 通信协议 CP XA规范 定义了RM-TM的交互接口 ...
Thrift 面试题
爱上在路上
08-18 3427
问题 答案 socket socket是 应用层与TCP/IP协议族通信的中间软件抽象层，它是一组接口，它把复杂的TCP/IP协议族隐藏在Socket接口后面 服务端：socket() 创建socket描述符；bind()绑定实际地址；listen() 监听； accept 建立链接； 客户端：socket() 创建socket描述符；connect()连...
设计模式面试题
爱上在路上
08-19 2356
设计模式 详解 设计模式 参考： https://www.jianshu.com/p/fc4b2e679a1e 单例模式 整个应用中保证只有一个类的实例存在 参考： https://mp.weixin.qq.com/s/dlVXW6aW4wLc...
redis缓存穿透击穿雪崩
04-21
Redis缓存穿透、击穿和雪崩都是缓存中常见的...为了解决这些问题，可以采取的方案包括：使用布隆过滤器解决缓存穿透，使用热点数据永不过期、加锁、限流等方式解决缓存击穿，使用分布式缓存和限流等方式解决缓存雪崩。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值