如何解决缓存穿透、缓存击穿、缓存雪崩?才能使数据库幸免于难
创始人
2025-05-28 17:33:31

随着互联网应用的不断发展,应用程序越来越复杂,同时面对的数据量也越来越大,对于性能的要求也越来越高。缓存技术的应用已经成为了许多互联网应用的必备技术之一。SpringBoot作为一款优秀的Java开发框架,在缓存方面也提供了一些优秀的解决方案,可以帮助我们解决缓存穿透、缓存击穿、缓存雪崩等问题。

 

一、Redis缓存

Redis是一个高性能的键值对存储数据库,也是一个基于内存的数据结构存储系统,同时也支持持久化数据存储。Redis提供了丰富的数据结构,包括字符串、哈希、列表、集合、有序集合等。在缓存方面,Redis最大的优点就是支持数据的持久化存储,同时也具有很好的性能和扩展性。

二、缓存穿透

缓存穿透是指查询一个不存在的数据,由于缓存中没有数据,请求会直接穿透到数据库中,从而引起数据库的压力过大,严重影响系统的性能。解决缓存穿透的常用方法有两种:

  1. 布隆过滤器

布隆过滤器是一种高效的数据结构,可以判断一个元素是否存在于一个集合中,同时也可以减轻数据库的压力。在使用布隆过滤器的时候,首先将所有的数据hash到一个位图中,如果查询的数据在位图中不存在,那么直接返回不存在,从而避免了对数据库的查询操作。

在SpringBoot中,我们可以使用Guava提供的布隆过滤器实现缓存穿透的解决方案。例如:

@Bean
public BloomFilter bloomFilter() {return BloomFilter.create(Funnels.stringFunnel(Charset.defaultCharset()), 100000, 0.001);
}@Override
public User getUserById(String id) {// 先从布隆过滤器中查询是否存在if (!bloomFilter.mightContain(id)) {return null;}// 如果存在,则查询Redis中的缓存数据User user = redisTemplate.opsForValue().get(id);if (user == null) {// 如果Redis中不存在,则查询数据库user = userDao.getUserById(id);if (user != null) {// 将数据缓存到Redis中redisTemplate.opsForValue().set(id, user);} else {// 如果数据库中也不存在,则将该id加入到布隆过滤器中bloomFilter.put(id);}}return user;
}

在上面的代码中,首先通过布隆过滤器判断请求的数据是否存在于集合中,如果不存在,则直接返回null,从而避免了对数据库的查询操作。

  1. 空对象缓存

另外一种解决缓存穿透的方法是采用空对象缓存的方式,即当查询的数据不存在时,将一个空对象缓存到Redis中。这样下次查询同样不存在的数据时,就可以直接从Redis中获取到一个空对象,从而避免了对数据库的查询操作。

在SpringBoot中,我们可以通过设置Redis缓存的过期时间来实现空对象缓存的解决方案。例如:

@Override
public User getUserById(String id) {User user = redisTemplate.opsForValue().get(id);if (user == null) {// 如果Redis中不存在,则查询数据库user = userDao.getUserById(id);if (user != null) {// 将数据缓存到Redis中redisTemplate.opsForValue().set(id, user);} else {// 如果数据库中也不存在,则将一个空对象缓存到Redis中,设置过期时间防止缓存雪崩redisTemplate.opsForValue().set(id, new User(), 5, TimeUnit.MINUTES);}}return user;
}

在上面的代码中,当查询的数据不存在时,我们将一个空对象缓存到Redis中,并设置了5分钟的过期时间。这样即使缓存中的数据被清空了,也不会引起数据库的压力过大,从而避免了缓存穿透。

三、缓存击穿

缓存击穿是指一个非常热点的数据在缓存中过期之后,正好在这个时间段内有大量的请求访问该数据,这些请求会直接穿透到数据库中,从而引起数据库的压力过大,严重影响系统的性能。解决缓存击穿的常用方法有两种:

  1. 设置热点数据永不过期

一种解决缓存击穿的方法是将热点数据设置为永不过期,从而避免缓存失效的问题。但是这种方法存在一个缺点,就是热点数据可能会被修改,如果不及时更新缓存,可能会导致缓存中的数据与实际数据不一致。

在SpringBoot中,我们可以通过设置Redis缓存的过期时间来实现设置热点数据永不过期的解决方案。例如:

@Override
public User getHotUserById(String id) {User user = redisTemplate.opsForValue().get(id);if (user == null) {// 如果Redis中不存在,则查询数据库user = userDao.getHotUserById(id);if (user != null) {// 将数据缓存到Redis中,设置过期时间为1小时redisTemplate.opsForValue().set(id, user, 1, TimeUnit.HOURS);}}return user;
}

在上面的代码中,我们将热点数据的过期时间设置为1小时,从而避免了缓存击穿的问题。但是这种方法存在一个缺点,就是如果在1小时内热点数据被修改了,缓存中的数据就会失效,需要重新查询数据库。

  1. 延迟缓存双写策略

另外一种解决缓存击穿的方法是采用延迟缓存双写策略,即在缓存中查询数据时,如果数据不存在,不立即去数据库中查询,而是先在缓存中写入一个空对象,然后再去数据库中查询数据并更新缓存,从而避免了缓存击穿的问题。

在SpringBoot中,我们可以通过设置Redis缓存的过期时间来实现延迟缓存双写策略的解决方案。例如:

@Override
public User getHotUserById(String id) {User user = redisTemplate.opsForValue().get(id);if (user == null) {// 如果Redis中不存在,则写入一个空对象redisTemplate.opsForValue().set(id, new User(), 5, TimeUnit.MINUTES);// 去数据库中查询数据并更新缓存user = userDao.getHotUserById(id);if (user != null) {redisTemplate.opsForValue().set(id, user, 1, TimeUnit.HOURS);}}return user;
}

在上面的代码中,我们先在缓存中写入一个空对象,并设置了5分钟的过期时间,然后再去数据库中查询数据并更新缓存。这样即使在查询数据的过程中,大量请求访问了该数据,也不会直接穿透到数据库中,从而避免了缓存击穿的问题。

四、缓存雪崩

缓存雪崩是指当缓存中的大量数据在同一时间失效,导致大量请求直接访问数据库,从而引起数据库的压力过大,严重影响系统的性能。解决缓存雪崩的常用方法有三种:

  1. 缓存数据的随机过期时间

一种解决缓存雪崩的方法是在缓存数据的过期时间上增加随机因素,从而避免大量数据在同一时间失效的情况。在SpringBoot中,我们可以通过设置Redis缓存的过期时间和一个随机值来实现这个解决方案。例如:

@Override
public List getUserList() {List userList = redisTemplate.opsForValue().get("userList");if (userList == null) {// 如果Redis中不存在,则查询数据库userList = userDao.getUserList();if (userList != null && userList.size() > 0) {// 将数据缓存到Redis中,并增加随机的过期时间int random = new Random().nextInt(600) + 600;redisTemplate.opsForValue().set("userList", userList, random, TimeUnit.SECONDS);}
}
return userList;     }

在上面的代码中,我们先在缓存中查询数据,如果不存在,则去数据库中查询,并将数据缓存到Redis中,并增加随机的过期时间。这样即使大量数据在同一时间失效,也不会全部直接访问数据库,从而避免了缓存雪崩的问题。

2. 预热缓存

另外一种解决缓存雪崩的方法是在系统启动时预热缓存,将系统中的热点数据提前加载到缓存中,从而避免了大量请求同时访问数据库的情况。在SpringBoot中,我们可以通过编写一个启动时执行的方法,来实现预热缓存的解决方案。例如:

@Component
public class CacheInit implements CommandLineRunner {@Autowired
private UserDao userDao;@Autowired
private RedisTemplate redisTemplate;@Override
public void run(String... args) throws Exception {List userList = userDao.getUserList();if (userList != null && userList.size() > 0) {// 将数据缓存到Redis中,并设置过期时间为1小时for (User user : userList) {redisTemplate.opsForValue().set(user.getId(), user, 1, TimeUnit.HOURS);}}
}
}

在上面的代码中,我们在系统启动时执行run方法,在该方法中先去数据库中查询热点数据,然后将数据缓存到Redis中,并设置过期时间为1小时。这样即使缓存中的数据在同一时间失效,也能够保证系统中的热点数据始终被缓存,从而避免了缓存雪崩的问题。

3. 使用分布式锁

最后一种解决缓存雪崩的方法是使用分布式锁,从而避免大量请求同时访问数据库的情况。在SpringBoot中,我们可以通过Redisson来实现分布式锁的解决方案。例如:

    @Overridepublic List getUserList() {List userList = redisTemplate.opsForValue().get("userList");if (userList == null) {// 如果Redis中不存在,则尝试获取分布式锁RLock lock = redissonClient.getLock("userListLock");try {// 尝试加锁,并设置锁的过期时间为5秒boolean success = lock.tryLock(5, TimeUnit.SECONDS);if (success) {// 如果获取到了锁,则查询数据库并将数据缓存到Redis中userList = userDao.getUserList();if (userList != null && userList.size() > 0) {redisTemplate.opsForValue().set("userList", userList, 1, TimeUnit.HOURS);}}} catch (InterruptedException e) {e.printStackTrace();} finally {// 释放锁lock.unlock}} return userList;}

在上面的代码中,我们先在缓存中查询数据,如果不存在,则尝试获取分布式锁,如果获取到了锁,则查询数据库并将数据缓存到Redis中。如果没有获取到锁,则等待一段时间再尝试获取锁,这样即使大量请求同时访问系统,也能够保证只有一个请求去查询数据库并缓存数据,从而避免了缓存雪崩的问题。

总结

如何利用好缓存,加快访问速度,提高并发的同时还不出现问题是一个优秀架构的关键,在开发过程中我经常会遇到一些问题,比如缓存穿透、缓存击穿和缓存雪崩,这些问题会导致系统性能下降、数据库负载过高等问题,因此必须采取一些措施来解决这些问题。

在实际应用中,需要根据系统的实际情况和性能要求来选择合适的机制,也可以采用多种机制来解决缓存问题。

相关内容

热门资讯

【实验报告】实验一 图像的... 实验目的熟悉Matlab图像运算的基础——矩阵运算;熟悉图像矩阵的显示方法࿰...
MATLAB | 全网最详细网... 一篇超超超长,超超超全面网络图绘制教程,本篇基本能讲清楚所有绘制要点&#...
大模型落地比趋势更重要,NLP... 全球很多人都开始相信,以ChatGPT为代表的大模型,将带来一场NLP领...
Linux学习之端口、网络协议... 端口:设备与外界通讯交流的出口 网络协议:   网络协议是指计算机通信网...
kuernetes 资源对象分... 文章目录1. pod 状态1.1 容器启动错误类型1.2 ImagePullBackOff 错误1....
STM32实战项目-数码管 程序实现功能: 1、上电后,数码管间隔50ms计数; 2、...
TM1638和TM1639差异... TM1638和TM1639差异说明 ✨本文不涉及具体的单片机代码驱动内容,值针对芯...
Qt+MySql开发笔记:Qt... 若该文为原创文章,转载请注明原文出处 本文章博客地址:https://h...
Java内存模型中的happe... 第29讲 | Java内存模型中的happen-before是什么? Java 语言...
《扬帆优配》算力概念股大爆发,... 3月22日,9股封单金额超亿元,工业富联、鸿博股份、鹏鼎控股分别为3.0...
CF1763D Valid B... CF1763D Valid Bitonic Permutations 题目大意 拱形排列࿰...
SQL语法 DDL、DML、D... 文章目录1 SQL通用语法2 SQL分类3 DDL 数据定义语言3.1 数据库操作3.2 表操作3....
文心一言 VS ChatGPT... 3月16号,百度正式发布了『文心一言』,这是国内公司第一次发布类Chat...
CentOS8提高篇5:磁盘分...        首先需要在虚拟机中模拟添加一块新的硬盘设备,然后进行分区、格式化、挂载等...
Linux防火墙——SNAT、... 目录 NAT 一、SNAT策略及作用 1、概述 SNAT应用环境 SNAT原理 SNAT转换前提条...
部署+使用集群的算力跑CPU密... 我先在开头做一个总结,表达我最终要做的事情和最终环境是如何的,然后我会一...
Uploadifive 批量文... Uploadifive 批量文件上传_uploadifive 多个上传按钮_asing1elife的...
C++入门语法基础 文章目录:1. 什么是C++2. 命名空间2.1 域的概念2.2 命名...
2023年全国DAMA-CDG... DAMA认证为数据管理专业人士提供职业目标晋升规划,彰显了职业发展里程碑及发展阶梯定义...
php实现助记词转TRX,ET... TRX助记词转地址网上都是Java,js或其他语言开发的示例,一个简单的...
【分割数据集操作集锦】毕设记录 1. 按要求将CSV文件转成json文件 有时候一些网络模型的源码会有data.json这样的文件里...
Postman接口测试之断言 如果你看文字部分还是不太理解的话,可以看看这个视频,详细介绍postma...
前端学习第三阶段-第4章 jQ... 4-1 jQuery介绍及常用API导读 01-jQuery入门导读 02-JavaScri...
4、linux初级——Linu... 目录 一、用CRT连接开发板 1、安装CRT调试工具 2、连接开发板 3、开机后ctrl+c...
Urban Radiance ... Urban Radiance Fields:城市辐射场 摘要:这项工作的目标是根据扫描...
天干地支(Java) 题目描述 古代中国使用天干地支来记录当前的年份。 天干一共有十个,分别为:...
SpringBoot雪花ID长... Long类型精度丢失 最近项目中使用雪花ID作为主键,雪花ID是19位Long类型数...
对JSP文件的理解 JSP是java程序。(JSP本质还是一个Servlet) JSP是&#...
【03173】2021年4月高... 一、单向填空题1、大量应用软件开发工具,开始于A、20世纪70年代B、20世纪 80年...
LeetCode5.最长回文子... 目录题目链接题目分析解题思路暴力中心向两边拓展搜索 题目链接 链接 题目分析 简单来说࿰...