【redis】redis的雪崩和穿透
来源:互联网 发布:南天软件 待遇 编辑:程序博客网 时间:2024/06/05 03:14
1.什么是缓存穿透
一般的缓存系统,都是按照key值去缓存查询,如果不存在对应的value,就应该去DB中查找 。这个时候,如果请求的并发量很大,就会对后端的DB系统造成很大的压力。这就叫做缓存穿透。关键词:缓存value为空;并发量很大去访问DB。
造成的原因
1.业务自身代码或数据出现问题;2.一些恶意攻击、爬虫造成大量空的命中,此时会对数据库造成很大压力。
解决方法
1.设置布隆过滤器,将所有可能存在的数据哈希到一个足够大的bitmap中,一个一定不存在的数据会被这个bitmap拦截掉,
从避免了对底层存储系统的查询压力。
2. 如果一个查询返回的数据为空,不管是数据不存在还是系统故障,我们仍然把这个结果进行缓存,但是它的过期时间会很短
最长不超过5分钟。
二、雪崩
1.什么是雪崩
因为缓存层承载了大量的请求,有效的保护了存储 层,但是如果缓存由于某些原因,整体不能够提供服务,于是所有的请求,就会到达存储层,存储层的调用量就会暴增,造成存储层也会挂掉的情况。缓存雪崩的英文解释是奔逃的野牛,指的是缓存层当掉之后,并发流量会像奔腾的野牛一样,大量后端存储。
存在这种问题的一个场景是:当缓存服务器重启或者大量缓存集中在某一个时间段失效,这样在失效的时候,大量数据会去直接访问DB,此时给DB很大的压力。
2.解决方法
(1)设置redis集群和DB集群的高可用,如果redis出现宕机情况,可以立即由别的机器顶替上来。这样可以防止一部分的风险。
(2)使用互斥锁
在缓存失效后,通过加锁或者队列来控制读和写数据库的线程数量。比如:对某个key只允许一个线程查询数据和写缓存,其他线程等待。单机的话,可以使用synchronized或者lock来解决,如果是分布式环境,可以是用redis的setnx命令来解决。
(3)不同的key,可以设置不同的过期时间,让缓存失效的时间点不一致,尽量达到平均分布。
(4)永远不过期
redis中设置永久不过期,这样就保证了,不会出现热点问题,也就是物理上不过期。
(5)资源保护
使用netflix的hystrix,可以做各种资源的线程池隔离,从而保护主线程池。
3.使用
四种方案,没有最佳只有最合适, 根据自己项目情况使用不同的解决策略。
- redis的穿透和雪崩
- 【redis】redis的雪崩和穿透
- REDIS (13) 缓存的穿透,雪崩和热点key
- 缓存穿透和缓存雪崩的预防和解决-Redis
- redis的缓存穿透和缓存雪崩
- redis中穿透与雪崩的预防及解决
- 【BigHereo 53】---Redis遇到的问题---雪崩,击穿,穿透
- 《redis学习》-- 缓存穿透和缓存雪崩的预防和解决
- 《redis学习》-- 缓存穿透和缓存雪崩的预防和解决
- redis-缓存穿透与缓存雪崩
- Redis雪崩、穿透、热点key等优化
- Redis关于缓存雪崩和缓存穿透等问题
- Memcached雪崩和穿透
- Memcached雪崩和穿透
- 【Redis深入】缓存雪崩与热点key的重建
- 名词解释“缓存穿透”和“缓存雪崩”
- 缓存穿透与缓存雪崩的解决方案
- Redis架构之防雪崩设计:网站不宕机背后的兵法
- SQL调优
- JavaScript学习资料一
- PAT 1008. 数组元素循环右移问题 (20)
- UE4模拟Unity的CameraLayer
- JSP页面跳转失败404问题(springmvc)
- 【redis】redis的雪崩和穿透
- 关于核函数的一些思考
- codeforces-869B
- PageInfo
- 设置刻度、刻度标签和网格
- HashMap的底层原理
- CentOS6.5配置ssh免密码登录并解决仍然需要输入密码的问题
- 9_JavaWEB_ServletRequest
- 使用nginx 服务器打开项目过程中的问题解决