Redis缓存穿透、缓存击穿与缓存雪崩的详细讲解和案例示范

2024-08-31 05:28

本文主要是介绍Redis缓存穿透、缓存击穿与缓存雪崩的详细讲解和案例示范,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在高并发的电商交易系统中,Redis缓存的使用可以极大地提高系统的性能。然而,缓存机制也面临着一些挑战,尤其是缓存穿透、缓存击穿和缓存雪崩问题。这些问题如果处理不当,可能导致系统的性能大幅下降,甚至出现系统崩溃的情况。本文将详细介绍这些问题及其解决方案,并结合电商交易系统的案例进行示范,提供相应的代码示例。


第一章:Redis缓存穿透

1.1 缓存穿透的定义

缓存穿透是指用户请求的数据在缓存中不存在,并且在数据库中也不存在。由于缓存未命中,每次请求都会直接访问数据库,导致数据库压力骤增,最终可能导致系统崩溃。

1.2 缓存穿透的原因
  1. 用户恶意攻击:攻击者通过大量请求不存在的数据来绕过缓存,直接攻击数据库。
  2. 未正确设置缓存:对于数据库中不存在的值,未设置空缓存,导致每次查询都穿透到数据库。
1.3 解决方案
1.3.1 使用布隆过滤器

布隆过滤器是一种概率型数据结构,能够高效判断一个元素是否在一个集合中存在。布隆过滤器通过多个哈希函数将数据映射到位数组中,以达到快速判断的目的。虽然布隆过滤器存在一定的误判率,但它可以有效防止缓存穿透。

实现代码示例
public class BloomFilterService {private BloomFilter<String> bloomFilter;public BloomFilterService(int expectedInsertions, double fpp) {bloomFilter = BloomFilter.create(Funnels.stringFunnel(Charsets.UTF_8), expectedInsertions, fpp);}public void addToFilter(String key) {bloomFilter.put(key);}public boolean mightContain(String key) {return bloomFilter.mightContain(key);}
}
1.3.2 缓存空对象

对于数据库中不存在的数据,将空对象缓存起来,并设置较短的过期时间。这样可以避免大量查询穿透到数据库。

实现代码示例
public String getProductInfo(String productId) {String cacheKey = "product:" + productId;String productInfo = redisTemplate.opsForValue().get(cacheKey);if (productInfo != null) {return productInfo;}// 查询数据库Product product = productRepository.findById(productId);if (product == null) {// 数据库中不存在,缓存空值redisTemplate.opsForValue().set(cacheKey, "", 60, TimeUnit.SECONDS);return null;}// 存在,缓存数据redisTemplate.opsForValue().set(cacheKey, product.toString(), 10, TimeUnit.MINUTES);return product.toString();
}
1.3.3 图示

在这里插入图片描述

1.4 电商系统中的案例

在电商系统中,用户请求某个商品详情,而该商品可能已经下架或者从未存在。在这种情况下,通过使用布隆过滤器和缓存空对象,能够有效防止系统缓存穿透。


第二章:Redis缓存击穿

2.1 缓存击穿的定义

缓存击穿是指缓存中某个热点数据在到期失效的瞬间,有大量的并发请求同时访问该数据,由于缓存失效,这些请求都会穿透到数据库,导致数据库负载剧增,甚至可能导致系统崩溃。

2.2 缓存击穿的原因
  1. 高并发访问:某些热点数据由于频繁访问,可能在缓存失效的瞬间引发大量并发请求直接访问数据库。
  2. 缓存未提前续期:如果没有在缓存即将失效时提前续期,可能导致缓存击穿。
2.3 解决方案
2.3.1 使用互斥锁(分布式锁)

在高并发场景下,当缓存失效时,只有一个请求能够获取锁,其他请求需要等待,直到锁释放后才能访问数据库并更新缓存。

实现代码示例
public String getProductInfo(String productId) {String cacheKey = "product:" + productId;String productInfo = redisTemplate.opsForValue().get(cacheKey);if (productInfo != null) {return productInfo;}// 获取分布式锁String lockKey = "lock:product:" + productId;boolean isLock = redisTemplate.opsForValue().setIfAbsent(lockKey, "1", 5, TimeUnit.SECONDS);if (isLock) {try {// 查询数据库并更新缓存Product product = productRepository.findById(productId);redisTemplate.opsForValue().set(cacheKey, product.toString(), 10, TimeUnit.MINUTES);return product.toString();} finally {// 释放锁redisTemplate.delete(lockKey);}} else {// 如果没有获取到锁,稍后重试Thread.sleep(100);return getProductInfo(productId);}
}
2.3.2 提前续期

在缓存即将失效时,提前续期缓存数据,以防止缓存失效瞬间的大量并发请求击穿缓存。

实现代码示例
@Scheduled(fixedRate = 5000)
public void refreshHotKeys() {List<String> hotKeys = getHotKeys(); // 获取热点数据的缓存Keyfor (String key : hotKeys) {redisTemplate.expire(key, 10, TimeUnit.MINUTES); // 重新设置过期时间}
}
2.3.3 图示

在这里插入图片描述

2.4 电商系统中的案例

在电商系统中,某些热门商品如秒杀商品会被频繁访问。在缓存失效时,通过分布式锁和提前续期策略,可以有效防止缓存击穿问题。


第三章:Redis缓存雪崩

3.1 缓存雪崩的定义

缓存雪崩是指大量缓存数据在同一时间失效,导致大量请求同时穿透到数据库,造成数据库压力过大,可能导致系统不可用。

3.2 缓存雪崩的原因
  1. 缓存集中失效:由于缓存数据的过期时间设定不合理,大量缓存数据在同一时间失效,导致请求集中穿透到数据库。
  2. 系统重启:如果Redis服务因故障重启,可能导致大量缓存数据失效。
3.3 解决方案
3.3.1 缓存数据过期时间设置为随机值

通过为缓存数据设置随机的过期时间,避免大量缓存数据在同一时间失效。

实现代码示例
public void cacheProductInfo(String productId, String productInfo) {int expireTime = 10 + new Random().nextInt(5); // 随机生成10-15分钟的过期时间String cacheKey = "product:" + productId;redisTemplate.opsForValue().set(cacheKey, productInfo, expireTime, TimeUnit.MINUTES);
}
3.3.2 预热缓存

在系统上线或重启时,提前将热点数据加载到缓存中,防止大量请求瞬间击穿缓存。

实现代码示例
public void cachePreheat() {List<String> hotProductIds = productRepository.getHotProductIds();for (String productId : hotProductIds) {String productInfo = productRepository.findById(productId).toString();redisTemplate.opsForValue().set("product:" + productId, productInfo, 10, TimeUnit.MINUTES);}
}
3.3.3 图示

在这里插入图片描述

第四章:总结

通过本文的详细讲解,我们对Redis缓存穿透、缓存击穿和缓存雪崩三大问题有了深入的理解。我们使用布隆过滤器和缓存空对象来防止缓存穿透,通过分布式锁和提前续期防止缓存击穿,并通过设置随机过期时间和缓存预热来防止缓存雪崩。每种问题都有其特定的解决方案,通过这些解决方案,我们能够有效提高系统的稳定性和性能。

通过图示,我们直观地展示了这些解决方案的实现过程,这有助于更好地理解和应用这些技术。在实际的电商系统中,合理运用这些技术能够极大提升系统的抗压能力,确保在高并发场景下的稳定性。

希望这篇文章能为您在实际项目中处理Redis缓存问题提供有益的参考。

这篇关于Redis缓存穿透、缓存击穿与缓存雪崩的详细讲解和案例示范的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1123007

相关文章

Redis 中的热点键和数据倾斜示例详解

《Redis中的热点键和数据倾斜示例详解》热点键是指在Redis中被频繁访问的特定键,这些键由于其高访问频率,可能导致Redis服务器的性能问题,尤其是在高并发场景下,本文给大家介绍Redis中的热... 目录Redis 中的热点键和数据倾斜热点键(Hot Key)定义特点应对策略示例数据倾斜(Data S

通过Docker Compose部署MySQL的详细教程

《通过DockerCompose部署MySQL的详细教程》DockerCompose作为Docker官方的容器编排工具,为MySQL数据库部署带来了显著优势,下面小编就来为大家详细介绍一... 目录一、docker Compose 部署 mysql 的优势二、环境准备与基础配置2.1 项目目录结构2.2 基

redis+lua实现分布式限流的示例

《redis+lua实现分布式限流的示例》本文主要介绍了redis+lua实现分布式限流的示例,可以实现复杂的限流逻辑,如滑动窗口限流,并且避免了多步操作导致的并发问题,具有一定的参考价值,感兴趣的可... 目录为什么使用Redis+Lua实现分布式限流使用ZSET也可以实现限流,为什么选择lua的方式实现

Redis中管道操作pipeline的实现

《Redis中管道操作pipeline的实现》RedisPipeline是一种优化客户端与服务器通信的技术,通过批量发送和接收命令减少网络往返次数,提高命令执行效率,本文就来介绍一下Redis中管道操... 目录什么是pipeline场景一:我要向Redis新增大批量的数据分批处理事务( MULTI/EXE

Linux修改pip和conda缓存路径的几种方法

《Linux修改pip和conda缓存路径的几种方法》在Python生态中,pip和conda是两种常见的软件包管理工具,它们在安装、更新和卸载软件包时都会使用缓存来提高效率,适当地修改它们的缓存路径... 目录一、pip 和 conda 的缓存机制1. pip 的缓存机制默认缓存路径2. conda 的缓

Redis中高并发读写性能的深度解析与优化

《Redis中高并发读写性能的深度解析与优化》Redis作为一款高性能的内存数据库,广泛应用于缓存、消息队列、实时统计等场景,本文将深入探讨Redis的读写并发能力,感兴趣的小伙伴可以了解下... 目录引言一、Redis 并发能力概述1.1 Redis 的读写性能1.2 影响 Redis 并发能力的因素二、

Redis中的常用的五种数据类型详解

《Redis中的常用的五种数据类型详解》:本文主要介绍Redis中的常用的五种数据类型详解,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录Redis常用的五种数据类型一、字符串(String)简介常用命令应用场景二、哈希(Hash)简介常用命令应用场景三、列表(L

Redis解决缓存击穿问题的两种方法

《Redis解决缓存击穿问题的两种方法》缓存击穿问题也叫热点Key问题,就是⼀个被高并发访问并且缓存重建业务较复杂的key突然失效了,无数的请求访问会在瞬间给数据库带来巨大的冲击,本文给大家介绍了Re... 目录引言解决办法互斥锁(强一致,性能差)逻辑过期(高可用,性能优)设计逻辑过期时间引言缓存击穿:给

Redis中如何实现商品秒杀

《Redis中如何实现商品秒杀》:本文主要介绍Redis中如何实现商品秒杀问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录技术栈功能实现步骤步骤一:准备商品库存数据步骤二:实现商品秒杀步骤三:优化Redis性能技术讲解Redis的List类型Redis的Set

Redis如何实现刷票过滤

《Redis如何实现刷票过滤》:本文主要介绍Redis如何实现刷票过滤问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录引言一、概述二、技术选型三、搭建开发环境四、使用Redis存储数据四、使用SpringBoot开发应用五、 实现同一IP每天刷票不得超过次数六