Redis缓存穿透出现原因及解决方案
来源:脚本之家
时间:2023-01-01 08:11:57 368浏览 收藏
本篇文章向大家介绍《Redis缓存穿透出现原因及解决方案》,主要包括redis缓存、穿透,具有一定的参考价值,需要的朋友可以参考一下。
在并发式的项目当中,一定要考虑一个缓存穿透的情况。那么什么是缓存穿透呢?简单的说来,就是当大量请求的key根本不在缓存当中,所以导致了请求直接到了数据库上,根本没有经过缓存这一层。比如一个黑客故意制造我们缓存中不存在的key发送大量的请求,就会导致请求直接落到数据库上。
也就是说,缓存穿透就是:1.缓存层不命中。2,存储层不命中,不将空的结果写回缓存。3,返回空结果给客户端。
一般mysql的默认最大连接数是150左右,当然这个是可以用show variables like ‘%max_connections%'命令来查看。
当然这只是一个指标,cpu磁盘内存网络等等原因都影响了他的并发能力,所以一般3000的并发请求就可以杀死大部分的数据库。
那么出现缓存穿透的时候需要怎么应对呢?
1)最基本的方式就是做好参数校检,比如不合法的请求就直接抛出异常信息给客户端,就比如设置查询条件id不能小于0或者传入邮箱格式不正确时直接返回错误消息给客户端。但是这样还是会出现缓存穿透的现象。那么还可以通过下面几个方案来解决:
2)缓存无效的key,如果数据库和缓存都找不到某个key的数据,就直接写一个到redis中并设置它的过期时间 set key value EX 10086。这种方式可以解决请求的key变化不频繁的情况,如果遇到专门的黑客攻击就不能解决这个情况。但是如果依然想用这个方法的话,那么在设置过期时间的时候,时间短一点,比如是一分钟。多说一句设置key的格式一般是:表名:列名:主键名:主键。
3)利用布隆过滤器:布隆过滤器是一个非常神奇的数据结构,通过这个过滤器可以帮助我们非常方便的去判断一个给定的数据是否存在于海量的数据当中。所以布隆过滤器在针对数据去重和验证数据的合法性时是非常有用的,布隆过滤器的实质就是一个bit(位)数组。也就是说每一个存进的数据都仅仅只占一位,在数据结构上来说相当于List、Map、Set等数据结构,但是占用的空间更少而且效率更高,但是缺点是它返回的值是概率性的,并不是多么的准确。当一个元素加入到布隆过滤器的时候:1.使用布隆过滤器当中的哈希函数对元素值进行计算,得到哈希值。2.根据得到的哈希值,在位数组中把对应的下标改为1。那么设置完成之后,我们要怎么判断一个元素是否存在于布隆过滤器当中呢?
首先我们要根据给定的元素再次进行hash计算;得到值之后判断数组中的每个元素是否都为1,如果值都为1的话,那么说明这个值在过滤器当中,如果不为1的话,就说明不再过滤器当中。
举个非常简单的例子
如上图所示,当字符串要加入到布隆过滤器当中时,该事务首先由多个哈希函数生成不同的哈希值,然后在对应的位数组的下标的元素设置位1,当二次存储相同的字符串时,因为先前的对应位置已经存在,所以在去重的时候非常方便。如果我们需要判断某个字符串是否在布隆过滤器当中时,只需要对给定的字符串再次进行相同的哈希计算,得到的值判断是否为1,从而判断数据是否存在于布隆过滤器当中,那么假如布隆过滤器说明一个数据存在时,很小的概率会误判,但是如果说明一个数据不存在时,那么一定是不存在的。
那么通过这个原理,利用redis布隆过滤器来将所有可能存在请求的值放在布隆过滤器当中,当用户请求时,直接判断用户发送来的请求是否存在于布隆过滤器中,不存在的话,直接返回请求参数错误信息给客户,存在的话就继续往下面走流程。
今天关于《Redis缓存穿透出现原因及解决方案》的内容就介绍到这里了,是不是学起来一目了然!想要了解更多关于redis的内容请关注golang学习网公众号!
-
142 收藏
-
137 收藏
-
116 收藏
-
322 收藏
-
256 收藏
-
342 收藏
-
361 收藏
-
159 收藏
-
164 收藏
-
221 收藏
-
156 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 507次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习
-
- 耍酷的西牛
- 很棒,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢作者大大分享技术文章!
- 2023-05-16 22:09:23
-
- 时尚的手机
- 好细啊,码住,感谢作者的这篇博文,我会继续支持!
- 2023-02-21 07:28:25
-
- 优美的小猫咪
- 很有用,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢作者分享博文!
- 2023-02-17 12:28:26
-
- 怕黑的耳机
- 这篇技术文章出现的刚刚好,好细啊,很有用,收藏了,关注作者了!希望作者能多写数据库相关的文章。
- 2023-02-07 06:37:06
-
- 隐形的世界
- 这篇技术文章真是及时雨啊,细节满满,写的不错,已加入收藏夹了,关注老哥了!希望老哥能多写数据库相关的文章。
- 2023-01-22 09:03:39
-
- 过时的冰淇淋
- 真优秀,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢作者分享文章内容!
- 2023-01-12 07:12:48
-
- 还单身的魔镜
- 这篇技术文章出现的刚刚好,太全面了,太给力了,收藏了,关注师傅了!希望师傅能多写数据库相关的文章。
- 2023-01-10 07:00:22
-
- 醉熏的水壶
- 这篇技术贴出现的刚刚好,太详细了,赞 👍👍,收藏了,关注老哥了!希望老哥能多写数据库相关的文章。
- 2023-01-07 14:19:13
-
- 朴素的蜡烛
- 太详细了,码起来,感谢作者的这篇技术贴,我会继续支持!
- 2023-01-05 18:55:44
-
- 过时的歌曲
- 写的不错,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢大佬分享文章内容!
- 2023-01-04 23:57:13
-
- 落后的白云
- 这篇博文出现的刚刚好,细节满满,真优秀,已加入收藏夹了,关注博主了!希望博主能多写数据库相关的文章。
- 2023-01-04 17:45:35
-
- 完美的泥猴桃
- 很详细,mark,感谢大佬的这篇技术贴,我会继续支持!
- 2023-01-03 06:42:15
-
- 沉默的硬币
- 赞 👍👍,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢大佬分享文章!
- 2023-01-03 00:30:56
-
- 舒服的小蜜蜂
- 这篇技术贴真是及时雨啊,老哥加油!
- 2023-01-02 20:03:22
-
- 耍酷的心锁
- 太详细了,已收藏,感谢老哥的这篇文章内容,我会继续支持!
- 2023-01-01 15:32:05
-
- 安静的泥猴桃
- 这篇文章内容太及时了,好细啊,写的不错,收藏了,关注楼主了!希望楼主能多写数据库相关的文章。
- 2023-01-01 09:19:52