当前位置:

首页 > 编程开发 > java mq消息队列的知识点有哪些

java mq消息队列的知识点有哪些

缓存雪崩我们首先看下这个正常的缓存流程是怎样的?如下图所示:可以看到,首先这个用户访问这个某东,然后这个某东去访问这个Redis,如果Redis有该访问数据,就会直接返回查缓存拿到的数据;如果Redis缓存没有查到该数据,就会去MySql数据库中查询,查询到有结果把从MySql中查到的数据同步至Redis缓存中去,同时会把这个查询到的结果返回回去。这是一个简单的正常的缓存流程。那么我们基于这个正常的缓存流程,来看下什么是缓存的雪崩。首先给大家举个例子,就是在双十一的时候,在某东买东西,进入它的这个首页,由

本文目录

    缓存雪崩

    我们首先看下这个正常的缓存流程是怎样的?如下图所示:

    java mq消息队列的知识点有哪些

    可以看到,首先这个用户访问这个某东,然后这个某东去访问这个 Redis,如果 Redis 有该访问数据,就会直接返回查缓存拿到的数据;如果 Redis 缓存没有查到该数据,就会去 MySql 数据库中查询,查询到有结果把从 MySql 中查到的数据同步至 Redis 缓存中去,同时会把这个查询到的结果返回回去。

    这是一个简单的正常的缓存流程。 那么我们基于这个正常的缓存流程,来看下什么是缓存的雪崩。

    首先给大家举个例子,就是在双十一的时候,在某东买东西,进入它的这个首页,由于是双十一,首页的访问量是非常大的,所以首页的很多数据是缓存在 redis 里面的。

    假设首页数据存储在 redis 里的 100 个 key,设置的缓存失效时间是两个小时,当在双十一期间,购物超过两个小时之后,这个首页数据的 redis 缓存在这瞬间会全部失效,导致所有的请求都打到这个 MySql 数据库上,此时数据库的访问压力增大,造成这个 MySql 数据库响应不及时而挂掉,从而某东的首页就没办法继续对外提供服务了,然后东哥就特别不开心,把这次的技术负责人送去了非洲。

    那么通过这个举例,我们来看下面这个图:

    java mq消息队列的知识点有哪些

    就是说用户访问某东,这个时候 redis 里面的 key 大量失效,导致这个某东直接访问数据库,把大量的请求都打到来数据库,这种现象就是缓存雪崩。简单来说就是 redis 缓存在同一时间大量失效,就像这个雪崩来了一样。

    那么缓存雪崩它的解决方案有几种呢?下面来说下:

    • 设置这个缓存的失效时间,不让大量的 key 在同一时间失效,即在设置这个缓存的时候,可以将 key 的失效时间分散开。

    • 我们部署 redis 一般是集群部署的,可以把这些热点的 key 放到不同的节点上去,让这些热点的 key 均匀的分布在不同的 redis 节点上。

    • 还有就是比较暴力的方法,不设置这个缓存失效的时间,让 key 永不失效。

    缓存穿透

    接下来我们再来介绍什么是缓存穿透。

    还是举个例子:比如说某位老哥开发了一个网站,然后这个网站非常的受欢迎,某一天突然遭到了黑客疯狂的攻击,他的这个攻击手段就是采用这个缓存穿透的原理。

    大家都知道通常情况下,数据库的主键是从0开始递增的,是没有负数的,那么这位黑客就利用这点,他不断的用 ID 小于零的参数发请求过来。这位老哥刚开始是把网站的所有数据放到了 redis 缓存里面去,但是黑客是用 ID 小于零的数来请求,redis 缓存里面并没有这个 ID 小于零的数据,这样 redis 就查不到这个结果,一旦 redis 查不到结果就会去数据库中查,那么所有请求都会打到数据库,而且会一直打到数据库中去,因为 redis 缓存这层根本拦截不到这样的数据。

    redis 缓存直接被这种数据穿透了,直接穿透到数据库里面。同样我们来看下面这个图:

    java mq消息队列的知识点有哪些

    首先这个恶意用户访问某东,用 id=-1 的数据去请求,然后这个 id=-1 的数据在 redis 缓存里面没有查到,就到数据库里面查询,也没有查到该条数据,只能返回空数据给前端了。

    这个恶意用户(黑客)用脚本不断的发这个数据去请求,直接穿透 redis 打到这个数据库上,这就是所谓的缓存穿透。 简单来说,缓存穿透就是指缓存和数据库中都没有这样的数据,一般出现这种情况都不是正常的用户在访问。

    那么缓存穿透的解决方案有以下几点:

    • 请求如果穿透 redis,直接到数据库,那么数据库无论查出什么结果,都写回到 redis 缓存里面去,这样下次用同一个参数发来请求的时候,就直接被 redis 缓存拦截掉了,就不回打到数据库了。

    • 对请求的参数做合法性校验。

    • 比较直接、简单粗暴的方法,把这个 IP 拉黑。

    • 最后是使用布隆过滤器,这是一个非常好的方式。

    缓存击穿

    我们再来讲最后一个问题,就是缓存的击穿。

    还是拿双十一来举例:东哥在双十一的时候,发话说想搞一个大活动,说想把自己20年前用的电脑拿出来拍卖,然后有巨多人对这个电脑感兴趣,于是东哥决定在双十一当天九点拍卖这台电脑,然后某东的开发程序员,把这台电脑数据放到了 redis 缓存里,即对应 redis 缓存里的一个 key。

    拍卖的时候,大家热情都非常的高涨,持续拍卖了将近三个小时,还没有结束这场线上拍卖,但是这台电脑对应的 redis 缓存 key 的失效时间是三个半小时。 当大家拍卖到三个半小时的时候,这台电脑的缓存 key 突然失效了,导致这个大量的拍卖请求在 redis 里面查不到数据,从而这些大量请求就会直接打到数据库上,此时数据库的瞬间压力增大,造成响应不及时而挂掉。
    这个时候呢,东哥看到自己的这台电脑还没拍卖出去,有点生气,于是把这个程序员送去了非洲。

    同样我们也来看下面这个图:

    java mq消息队列的知识点有哪些

    用户访问某东,然后去 redis 请求某个拍卖秒杀商品,在缓存没有失效的时候,redis 可以把这个查询到的缓存 key 的结果返回回去,但是当这个缓存的 key 失效了,这个请求就会击穿这个 redis,直接打到数据库上。

    这里大家注意的是,这里是某一个热点的 key,大量的用户请求不断的访问这个热点的 key,当这个热点的 key 突然失效,把请求都打到数据库上,这个过程就是叫做缓存击穿了。记住它是击穿某个一个非常热点的 key。

    那么这个缓存击穿的解决方案是:

    • 让这个热点 key 不过期,即不设置失效时间(不推荐)。

    • 使用分布式锁,如果是单体应用的话使用互斥锁(分布式锁后续文章会讲)。

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    编程开发 Java
    相关文章 更多
    Java单元测试入门:使用JUnit 5编写第一个测试用例
    Java单元测试入门:使用JUnit 5编写第一个测试用例

    面向初学者的JUnit 5实用入门指南。从测试概念、Maven依赖配置,到手把手编写首个单元测试用例及断言验证,助你掌握Java单元测试的核心流程。

    Java变量未初始化报错解析:局部变量与成员变量默认值差异
    Java变量未初始化报错解析:局部变量与成员变量默认值差异

    深入解析Java中局部变量未初始化编译报错与成员变量自动赋予默认值的机制差异,涵盖JVM内存分配、编译期确定性赋值检查与实际排查修复方案。

    Java获取当前时间并格式化输出:DateTimeFormatter与SimpleDateFormat
    Java获取当前时间并格式化输出:DateTimeFormatter与SimpleDateFormat

    详细讲解在Java中获取当前系统时间并进行格式化输出的两种核心方案:基于Java 8全新日期时间API的DateTimeFormatter与传统遗留的SimpleDateFormat,包含完整代码示例、线程安全机制对比及生产选型建议。

    Java中final与static final常量的定义及初始化规则
    Java中final与static final常量的定义及初始化规则

    深入解析Java中final变量与static final常量的定义、内存语义、初始化时机及合法赋值路径,涵盖编译期常量优化与实战避坑指南。

    Java抽象方法与接口方法的区别及选型建议
    Java抽象方法与接口方法的区别及选型建议

    深入对比Java中抽象类抽象方法与接口方法的语法演进、设计意图及运行期差异,并提供清晰的架构选型决策流程与实战范例。

    Java实现HTTP请求与JSON解析的完整代码示例
    Java实现HTTP请求与JSON解析的完整代码示例

    本文提供Java标准库HttpClient发起HTTP GET/POST请求并结合Jackson进行JSON数据反序列化与序列化的完整代码示例与工程实践指南。

    Java递归出现StackOverflowError的原因分析及栈空间优化方案
    Java递归出现StackOverflowError的原因分析及栈空间优化方案

    详细分析Java递归调用出现StackOverflowError的原因,结合代码说明线程栈、栈帧和递归深度之间的关系,并介绍终止条件排查、迭代改写、减少栈帧开销以及通过-Xss调整JVM栈空间的方法。

    Java空指针异常(NPE)的代码排查与修复实例
    Java空指针异常(NPE)的代码排查与修复实例

    针对Java中常见的NullPointerException(NPE),本文从堆栈日志定位、典型代码触发场景、具体修复代码对比到防御体系进行系统讲解,提供实用且易上手的排查与修复方案。

    selenium上传文件教程本地文件路径设置方法
    selenium上传文件教程本地文件路径设置方法

    深入解析Selenium处理文件上传的技术细节,涵盖标准HTML控件的路径直接注入法与非标准控件的系统级模拟方案,提供Windows与Linux环境下的路径设置最佳实践及常见异常排查。

    大数据开发语言选型:Java对比Scala与Python的优缺点及适用场景
    大数据开发语言选型:Java对比Scala与Python的优缺点及适用场景

    针对大数据工程场景,系统对比Java、Scala与Python在执行性能、生态结合、开发效率和维护成本上的核心差异,给出清晰的架构选型依据与落地方案。

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版
    macOS

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版
    Windows

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。