ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

缓存雪崩、击穿、穿透

2021-08-10 14:02:56  阅读:157  来源: 互联网

标签:缓存 请求 数据库 击穿 雪崩 Key id


    怎么理解缓存雪崩?       举个简单的例子:如果所有首页的Key失效时间都是12个小时,中午13点刷新的,我零点有个秒杀活动大量用户涌入,假设当时每秒6000个请求,本来缓存在可以抗住每秒5000个请求,但是缓存当时所有的Key都失效了。此时1秒6000个请求全部落数据库,数据库必然扛不住,它会报警一下,真实情况可能DBA都没反应过来就直接挂了。此时,如果没有什么特别的方案来处理这个故障,DBA很着急,重启数据库,但是数据库立马又被新的流量给打死了。       怎么处理缓存雪崩?       处理缓存雪崩简单,在批量往Redis存数据的时候,把每个Key的实效时间都加上一个随机值就好了,这样可以保证数据不会在同一时间大面积实效。       setRedis(Key,value,time + Math.random()* 10000)       如果Redis是集群部署,将热点数据均匀分布在不同的redis库中也能避免全部失效的问题。       或者设置热点数据永远不过期,有更新操作就更新缓存就好了(比如运营更新了首页商品,那你刷新下缓存就完事,不要设置过期时间)。       怎么理解缓存穿透?       缓存穿透是指缓存和数据库中都没有的数据,而用户不断发起请求,我们的数据库的id都是1开始自增上去的,如发起id为-1的数据或id为特别大不存在的数据。这时的用户可能是攻击者,攻击会导致数据库压力过大,严重会击垮数据库。       像这种你如果不对参数做校验,数据库id都是大于0的,我一直用小于0的参数请求,每次都能绕开Redis直接打到数据库,数据库也查不到,每次都这样,并发高点就容易崩掉了。       1、缓存穿透在接口层增加校验,比如用户鉴权校验,参数做校验,不合法的参数直接Return。       2、从缓存取不到的数据,在数据库中也没有取到,这时也可以将对应的Key的value写为null、未知错误、稍后重试这样的值,具体取啥问产品或者看具体的场景,缓存有效时间可以设置短点,如30秒(设置太长会导致正常情况也无法使用)。       3、布隆过滤器,对于恶意攻击,向服务器请求大量不存在的数据造成的数据穿透,还可以使用布隆过滤器先做一次过滤,对于不存在的数据布隆过滤器一般都能够过滤掉,不让请求再往后端发送。当布隆过滤器说某个值存在时,这个值可能不存在,当它说不存在时,那就肯定不存在。       4、这样可以防止攻击用户反复用同一个id暴力攻击,但是我们要知道正常用户是不会在单秒内发起这么多请求的,那网关层nginx也记得有配置项,可以让运维对单个IP每秒访问次数超出阈值的IP都拉黑。       怎么理解缓存击穿?       至于缓存击穿嘛,这个跟缓存雪崩有点像,但是又有一点不一样,缓存雪崩是因为大面积的缓存失效,打崩了DB,而缓存击穿是指一个Key非常热点,在不停的扛着大并发,大并发集中对这一个点进行访问,当这个Key在失效的瞬间,持续的大并发就穿破缓存,直接请求数据库,就像在一个完好无损的桶上凿开了一个洞。       缓存击穿的话,设置热点数据永不过期,或者加上互斥锁就能搞定。

标签:缓存,请求,数据库,击穿,雪崩,Key,id
来源: https://www.cnblogs.com/zhouguowei/p/15123444.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有