这篇文章主要讲解了解决复述,缓存及热点关键的问题,内容清晰明了,对此有兴趣的小伙伴可以学习一下,相信大家阅读完之后会有帮助。
今天又学到了很多,感觉雪崩和穿透很有意思理解起来也比较清晰,然后我搜索了一些资料,给自己做一个普及
我们通常使用缓存+过期时间的策略来帮助我们加速接口的访问速度,减少了后端负载,同时保证功能的更新
<强>缓存穿透
缓存系统,按照关键去查询值,当关键对应的价值一定不存在的时候并对关键并发请求量很大的时候,就会对后端造成很大的压力。
(查询一个必然不存在的数据,比如文章表,查询一个不存在的id,每次都会访问DB,如果有人恶意破坏,很可能直接对DB造成影响。)
由于缓存不命中,每次都要查询持久层。从而失去缓存的意义。
<强>解决方法:
1,缓存层缓存空值。
-缓存太多空值,占用更多空间。(优化:给个空值过期时间)
-存储层更新代码了,缓存层还是空值。(优化:后台设置时主动删除空值,并缓存把值进去)
2,将数据库中所有的查询条件,放到布隆过滤器中。当一个查询请求来临的时候,先经过布隆过滤器进行检查,如果请求存在这个条件中,那么继续执行,如果不在,直接丢弃。
备注:
比如数据库中有10000个条件,那么布隆过滤器的容量大小设置的要稍微比10000大一些,比如12000。
对于误判率的设置,根据实际项目,以及硬件设施来具体决定。但是一定不能设置为0,并且误判率设置的越小,哈希函数跟数组长度都会更多跟更长,那么对硬件,内存中间的要求就会相应的高。
私有静态BloomFilter
有了大小跟误判率,那么布隆过滤器就会产生相应的哈希函数跟数组。
综上:我们可以利用布隆过滤器,将复述,缓存击穿控制在一个可容忍的范围内。
<强>缓存雪崩(缓存失效)
如果缓存集中在一段时间内失效,发生大量的缓存穿透,所有的查询都落在数据库上,造成了缓存雪崩。
缓存层宕掉后,流量会像奔逃的野牛一样,打向后端存储
<强>解决方法:
- <李>在缓存失效后,通过加锁或者队列来控制读数据库写缓存的线程数量。比如对某个关键只允许一个线程查询数据和写缓存,其他线程等待。 <李>可以通过缓存重新加载机制,预先去更新缓存,再即将发生大并发访问前手动触发加载缓存李 <>李不同的关键,设置不同的过期时间,让缓存失效的时间点尽量均匀李 <>李做二级缓存,或者双缓存策略.A1为原始缓存,A2为拷贝缓存,A1失效时,可以访问A2, A1缓存失效时间设置为短期,A2设置为长期。
李,
<>强热点关键
(1)这个关键是一个热点关键(例如一个重要的新闻,一个热门的八卦新闻等等),所以这种关键访问量可能非常大。
(2)缓存的构建是需要一定时间的。(可能是一个复杂计算,例如复杂的sql,多次IO、多个依赖(各种接口)等等)
于是就会出现一个致命问题:在缓存失效的瞬间,有大量线程来构建缓存(见下图),造成后端负载加大,甚至可能会让系统崩溃。
<强>解决方法:
1。使用互斥锁(互斥锁键):这种解决方案思路比较简单,就是只让一个线程构建缓存,其他线程等待构建缓存的线程执行完,重新从缓存获取数据就可以了
2。“提前“使用互斥锁(互斥锁键):在价值内部设置1个超时值(timeout1) timeout1比实际的memcache超时(timeout2)小。当从缓存读取到timeout1发现它已经过期时候,马上延长timeout1并重新设置到缓存。然后再从数据库加载数据并设置到缓存中。
3。“永远不过期“:
这里的“永远不过期”包含两层意思:
(1)从复述上看,确实没有设置过期时间,这就保证了,不会出现热点关键过期问题,也就是“物”理不过期。
(2)从功能上看,如果不过期,那不就成静态的了吗?所以我们把过期时间存在关键对应的价值里,如果发现要过期了,通过一个后台的异步线程进行缓存的构建,也就是“逻辑”过期
4。资源保护:可以做资源的隔离保护主线程池,如果把这个应用到缓存的构建也未尝不可。
<强>四种方案对比:
作为一个并发量较大的互联网应用,我们的目标有3个:
1。加快用户访问速度,提高用户体验。
2。降低后端负载,保证系统平稳。
