返回顶部
首页 > 资讯 > 后端开发 > Python >详解Java分布式缓存系统中必须解决的四大问题
  • 886
分享到

详解Java分布式缓存系统中必须解决的四大问题

2024-04-02 19:04:59 886人浏览 安东尼

Python 官方文档:入门教程 => 点击学习

摘要

目录缓存穿透缓存击穿缓存雪崩缓存一致性分布式缓存系统是三高架构中不可或缺的部分,极大地提高了整个项目的并发量、响应速度,但它也带来了新的需要解决的问题,分别是: 缓存穿透、缓存击穿、

分布式缓存系统是三高架构中不可或缺的部分,极大地提高了整个项目并发量、响应速度,但它也带来了新的需要解决的问题,分别是: 缓存穿透、缓存击穿、缓存雪崩和缓存一致性问题。

缓存穿透

第一个比较大的问题就是缓存穿透。这个概念比较好理解,和命中率有关。如果命中率很低,那么压力就会集中在数据库持久层。

假如能找到相关数据,我们就可以把它缓存起来。但问题是,本次请求,在缓存和持久层都没有命中,这种情况就叫缓存的穿透。

举个例子,如上图,在一个登录系统中,有外部攻击,一直尝试使用不存在的用户进行登录,这些用户都是虚拟的,不能有效地被缓存起来,每次都会到数据库中查询一次,最后就会造成服务的性能故障。

解决这个问题有多种方案,我们来简单介绍一下。

第一种就是把空对象缓存起来。不是持久层查不到数据吗?那么我们就可以把本次请求的结果设置为 null,然后放入到缓存中。通过设置合理的过期时间,就可以保证后端数据库的安全

缓存空对象会占用额外的缓存空间,还会有数据不一致的时间窗口,所以第二种方法就是针对大数据量的、有规律的键值,使用布隆过滤器进行处理。

一条记录存在与不存在,是一个 Bool 值,只需要使用 1 比特就可存储。布隆过滤器就可以把这种是、否操作,压缩到一个数据结构中。比如手机号,用户性别这种数据,就非常适合使用布隆过滤器。

缓存击穿

缓存击穿,指的也是用户请求落在数据库上的情况,大多数情况,是由于缓存时间批量过期引起的。

我们一般会对缓存中的数据,设置一个过期时间。如果在某个时刻从数据库获取了大量数据,并设置了同样的过期时间,它们将会在同一时刻失效,造成和缓存的击穿。

对于比较热点的数据,我们就可以设置它不过期;或者在访问的时候,更新它的过期时间;批量入库的缓存项,也尽量分配一个比较平均的过期时间,避免同一时间失效。

缓存雪崩

雪崩这个词看着可怕,实际情况也确实比较严重。缓存是用来对系统加速的,后端的数据库只是数据的备份,而不是作为高可用的备选方案。

当缓存系统出现故障,流量会瞬间转移到后端的数据库。过不了多久,数据库将会被大流量压垮挂掉,这种级联式的服务故障,可以形象地称为雪崩。

缓存的高可用建设是非常重要的。Redis 提供了主从和 Cluster 的模式,其中 Cluster 模式使用简单,每个分片也能单独做主从,可以保证极高的可用性。

另外,我们对数据库的性能瓶颈有一个大体的评估。如果缓存系统当掉,那么流向数据库的请求,就可以使用限流组件,将请求拦截在外面。

缓存一致性

引入缓存组件后,另外一个老大难的问题,就是缓存的一致性。

我们首先来看问题是怎么发生的。对于一个缓存项来说,常用的操作有四个:写入、更新、读取、删除。

  • 写入:缓存和数据库是两个不同的组件,只要涉及双写,就存在只有一个写成功的可能性,造成数据不一致。
  • 更新:更新的情况类似,需要更新两个不同的组件。
  • 读取:读取要保证从缓存中读到的信息是最新的,是和数据库中的是一致的。
  • 删除:当删除数据库记录的时候,如何把缓存中的数据也删掉?

由于业务逻辑大多数情况下,是比较复杂的。其中的更新操作,就非常昂贵,比如一个用户的余额,就是通过计算一系列的资产算出来的一个数。如果这些关联的资产,每个地方改动的时候,都去刷新缓存,那代码结构就会非常混乱,以至于无法维护。

我推荐使用触发式的缓存一致性方式,使用懒加载的方式,可以让缓存的同步变得非常简单:

  • 当读取缓存的时候,如果缓存里没有相关数据,则执行相关的业务逻辑,构造缓存数据存入到缓存系统;
  • 当与缓存项相关的资源有变动,则先删除相应的缓存项,然后在数据库中对资源进行更新,最后再删除相应的缓存项。

这种操作,除了编程模型简单,有一个明显的好处。我只有在用到这个缓存的时候,才把它加载到缓存系统中。如果每次修改 都创建、更新资源,那缓存系统中就会存在非常多的冷数据。这实际上是实现了边缘缓存模式(Cache-Aside Pattern),即按需将数据从数据存储加载到缓存中,最大的作用就是提高性能减少不必要的查询。

但这样还是有问题。接下来介绍的场景,也是面试中经常提及的问题。

我们上面提到的数据库的更新动作,和缓存删除动作,明显是不在一个事务里的。可能造成数据库的内容和缓存里的内容在更新的过程有不一致。

在面试中,只要你把这个问题给点出来,面试官都会跷起大拇指。

可以使用分布式来解决这个问题,将数据库操作和缓存操作,与其他的缓存读操作,使用锁进行资源隔离即可。一般来说,读操作是不需要加锁的,它会在遇到锁的时候,重试等待,直到超时。

到此这篇关于详解Java分布式缓存系统中必须解决的四大问题的文章就介绍到这了,更多相关Java分布式缓存系统内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

--结束END--

本文标题: 详解Java分布式缓存系统中必须解决的四大问题

本文链接: https://lsjlt.com/news/145928.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • 详解Java分布式缓存系统中必须解决的四大问题
    目录缓存穿透缓存击穿缓存雪崩缓存一致性分布式缓存系统是三高架构中不可或缺的部分,极大地提高了整个项目的并发量、响应速度,但它也带来了新的需要解决的问题,分别是: 缓存穿透、缓存击穿、...
    99+
    2024-04-02
  • Java分布式缓存系统中必须解决的四大问题是什么
    这篇文章主要介绍了Java分布式缓存系统中必须解决的四大问题是什么的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇Java分布式缓存系统中必须解决的四大问题是什么文章都会有所收获,下面我们一起来看看吧。分布式缓存...
    99+
    2023-06-30
  • 详解Java分布式系统中session一致性问题
    业务场景 在单机系统中,用户登陆之后,服务端会保存用户的会话信息,只要用户不退出重新登陆,在一段时间内用户可以一直访问该网站,无需重复登陆。用户的信息存在服务端的 session 中...
    99+
    2024-04-02
  • 详解SpringCache使用Redisson分布式锁解决缓存击穿问题
    目录1 什么是缓存击穿2 为什么要使用分布式锁3 什么是Redisson4 Spring Boot集成Redisson4.1 添加maven依赖4.2 配置yml4.3 配置Redi...
    99+
    2024-04-02
  • 如何在 PHP 分布式系统中使用缓存解决高并发问题?
    在现代互联网应用程序中,高并发是一个非常普遍的问题。PHP 分布式系统中,缓存是一个非常重要的组件,可以帮助我们解决高并发问题。在本文中,我们将讨论如何在 PHP 分布式系统中使用缓存来解决高并发问题。 一、什么是缓存? 缓存是一种用于存...
    99+
    2023-09-22
    分布式 并发 缓存
  • 分布式缓存中的 ASP 缓存和 JavaScript:如何解决性能问题?
    随着互联网的发展,网站的访问量越来越大,对服务器的性能要求也越来越高。为了提高网站的访问速度和用户体验,使用缓存技术是一个不错的选择。在缓存技术中,分布式缓存是一种常用的技术。本文将介绍在分布式缓存中,如何使用 ASP 缓存和 JavaS...
    99+
    2023-07-10
    缓存 javascript 分布式
  • Java分布式系统中session一致性问题怎么解决
    小编给大家分享一下Java分布式系统中session一致性问题怎么解决,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!Java可以用来干什么Java主要应用于:1....
    99+
    2023-06-14
  • 分布式系统中的 HTTP 通信问题:面试必问问题
    随着分布式系统的普及,HTTP 通信成为了系统之间常用的通信方式之一。然而,在实际应用中,HTTP 通信也会遇到一些问题。本文将从面试必问问题的角度,介绍分布式系统中的 HTTP 通信问题,并提供相应的解决方案。 HTTP 请求的幂等性...
    99+
    2023-06-16
    http 面试 分布式
  • 分布式系统中的go响应问题解决方案。
    分布式系统中的go响应问题解决方案 在分布式系统中,响应问题是一项常见的挑战。Go语言作为一门高效且并发的语言,可以帮助我们解决这些问题。本文将介绍一些在分布式系统中使用Go解决响应问题的方案,并通过演示代码来展示这些方案的实现。 一、使用...
    99+
    2023-06-15
    响应 分布式 面试
  • LeetCode中Java缓存问题解决方案分享
    在开发过程中,为了提高程序的性能,缓存是一个非常常见的解决方案。在LeetCode题目中,也存在一些需要用到缓存的问题。然而,如果没有考虑到缓存的实现细节,就可能会导致程序出现错误或者性能下降。本文将介绍LeetCode中Java缓存问题...
    99+
    2023-06-28
    缓存 文件 leetcode
  • 如何使用Java解决分布式系统中的难题?
    分布式系统是一个由多台计算机组成的系统,这些计算机通过网络连接在一起,并共享资源和任务。在分布式系统中,有很多难题需要解决,其中包括网络延迟、故障处理、数据一致性等。Java是一种广泛使用的编程语言,它提供了许多工具和框架,可以帮助我们解决...
    99+
    2023-09-24
    leetcode path 分布式
  • Java开发人员必须了解的Apache服务器中的路径缓存问题。
    Java开发人员必须了解的Apache服务器中的路径缓存问题 在Java开发过程中,我们通常会使用Apache服务器来运行我们的Web应用程序。然而,在使用Apache服务器时,开发人员可能会遇到路径缓存问题,这可能会导致应用程序的性能下降...
    99+
    2023-07-29
    path 缓存 apache
  • 深入理解分布式系统中的缓存架构(上)
    本文主要介绍大型分布式系统中缓存的相关理论,常见的缓存组件以及应用场景。1 缓存概述缓存概述2 缓存的分类缓存主要分为以下四类缓存的分类1 CDN缓存基本介绍CDN(Content Delivery Network 内容分发网络)的基本原理...
    99+
    2023-06-02
  • 分布式架构,刚性事务-2PC必须注意的问题及3PC详细解
    2PC必须注意的问题咱们上文介绍了分布式事务的常见方案、类型划分、2PC的起源和流程。但是不幸的是2PC还是存在几个问题:全流程的同步阻塞:不管是第一阶段还是第二阶段,所有参与节点都是事务阻塞型。当参与者占有公共资源时,其他第三方访问公共资...
    99+
    2023-06-05
  • 必须理解的分布式系统中雷同的集群技术及原理
    写在前面在当今信息爆炸的时代,单台计算机已经无法负载日益增长的业务发展,虽然也有性能强大的超级计算机,但是这种高端机不仅费用高昂,也不灵活,一般的企业是负担不起的,而且也损失不起,那么将一群廉价的普通计算机组合起来,让它们协同工作就像一台超...
    99+
    2023-06-05
  • 用Java编写分布式系统:常见问题和解决方案。
    分布式系统是现代计算机技术的一项重要应用,它可以将一个大型系统分割成多个相互独立的子系统,这些子系统可以在不同的物理机器上运行,从而提高系统的性能、可扩展性和可靠性。而Java作为一种跨平台、面向对象、高性能的编程语言,也成为了开发分布式系...
    99+
    2023-09-24
    leetcode path 分布式
  • 如何使用Go语言解决分布式系统中的数据分布问题?
    在分布式系统中,数据分布是一个非常重要的问题。随着互联网和云计算的发展,分布式系统变得越来越普遍。在这样的系统中,如何高效地分布和管理数据是一个挑战。本文将介绍如何使用Go语言解决分布式系统中的数据分布问题。 一、数据分布问题 在分布式系统...
    99+
    2023-10-08
    编程算法 数组 分布式
  • PHP trait DTO:解决分布式系统中数据传输问题的解决方案
    在当今的软件开发中,分布式系统已经成为一个不可忽视的趋势。由于分布式系统的特殊性,数据的传输变得尤为重要而又复杂。为了应对这个问题,PHP提供了trait DTO(Data Transfer Object)这个解决方案。DTO是一种设计模式...
    99+
    2023-10-21
    PHP dto trait
  • Go 语言分布式编程教程:如何解决分布式系统中的常见问题?
    随着互联网的发展,分布式系统在企业级应用中越来越普遍。分布式系统可以提高系统的可靠性、可扩展性和性能。然而,在分布式系统中,有许多常见问题需要解决,例如网络延迟、节点故障、数据一致性等。在本篇文章中,我们将介绍如何使用 Go 语言解决分布...
    99+
    2023-08-26
    分布式 教程 面试
  • 分布式缓存是如何解决ASP网站并发性能问题的?
    在ASP网站开发中,性能问题一直是一个关键问题。随着网站访问量的增加,网站的性能问题也会愈加明显。当多个用户同时访问网站时,就会产生并发性能问题。此时,分布式缓存就成为了解决并发性能问题的有效手段。 分布式缓存是一种将数据缓存在多台机器上...
    99+
    2023-10-21
    分布式 缓存 并发
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作