返回顶部
首页 > 资讯 > 后端开发 > Python >Spring Cloud Gateway 内存溢出的解决方案
  • 939
分享到

Spring Cloud Gateway 内存溢出的解决方案

2024-04-02 19:04:59 939人浏览 独家记忆

Python 官方文档:入门教程 => 点击学习

摘要

记 spring cloud Gateway 内存溢出查询过程 环境配置: org.springframework.boot : 2.1.4.RELEASE

spring cloud Gateway 内存溢出查询过程

环境配置:

  • org.springframework.boot : 2.1.4.RELEASE
  • org.springframework.cloud :Greenwich.SR1

事故记录:

由于网关存在 RequestBody 丢失的情况,顾采用了网上的通用解决方案,使用如下方式解决:


@Bean
public RouteLocator tpauditRoutes(RouteLocatorBuilder builder) {
    return builder.routes().route("gateway-post", r -> r.order(1)
       .method(HttpMethod.POST)
       .and()
       .readBody(String.class, requestBody -> {return true;}) # 重点在这
       .and()
       .path("/gateway
 public <T> BooleanSpec readBody(Class<T> inClass, Predicate<T> predicate) {
  return asyncPredicate(getBean(ReadBodyPredicateFactory.class)
    .applyAsync(c -> c.setPredicate(inClass, predicate)));
 }

异步调用的 ReadBodyPredicateFactory.applyAsync() 和 错误日志中的


org.springframework.cloud.gateway.handler.predicate.ReadBodyPredicateFactory.lambda$null$0(ReadBodyPredicateFactory.java:102)

指向方法一致。查看源码102行:


Flux<DataBuffer> cachedFlux = Flux.defer(() -> 
 Flux.just(dataBuffer.slice(0, dataBuffer.readableByteCount()))
);

此处 Spring Cloud Gateway 通过 dataBuffer.slice 切割出了新的 dataBuffer,但是通过 Netty 的内存检测工具判断,此处的 dataBuffer 并没有被回收。

错误如下,日志很多容易被忽视。

ERROR io.netty.util.ResourceLeakDetector.reportTracedLeak:317 - LEAK: ByteBuf.release() was not called before it's garbage-collected. See http://netty.io/wiki/reference-counted-objects.html for more infORMation.

找到问题那就要解决才行,尝试修改源码


@Override
@SuppressWarnings("unchecked")
public AsyncPredicate<ServerWEBExchange> applyAsync(Config config) {
    return exchange -> {
        Class inClass = config.getInClass();

        Object cachedBody = exchange.getAttribute(CACHE_REQUEST_BODY_OBJECT_KEY);
        Mono<?> modifiedBody;
        // We can only read the body from the request once, once that
        // happens if we
        // try to read the body again an exception will be thrown. The below
        // if/else
        // caches the body object as a request attribute in the
        // ServerWebExchange
        // so if this filter is run more than once (due to more than one
        // route
        // using it) we do not try to read the request body multiple times
        if (cachedBody != null) {
            try {
                boolean test = config.predicate.test(cachedBody);
                exchange.getAttributes().put(TEST_ATTRIBUTE, test);
                return Mono.just(test);
            } catch (ClassCastException e) {
                if (LOGGER.isDebugEnabled()) {
                    LOGGER.debug("Predicate test failed because class in predicate "
                            + "does not match the cached body object", e);
                }
            }
            return Mono.just(false);
        } else {
            // Join all the DataBuffers so we have a single DataBuffer for
            // the body
            return DataBufferUtils.join(exchange.getRequest().getBody()).flatMap(dataBuffer -> {
                // Update the retain counts so we can read the body twice,
                // once to parse into an object
                // that we can test the predicate against and a second time
                // when the HTTP client sends
                // the request downstream
                // Note: if we end up reading the body twice we will run
                // into
                // a problem, but as of right
                // now there is no Good use case for doing this
                DataBufferUtils.retain(dataBuffer);
                // Make a slice for each read so each read has its own
                // read/write indexes
                Flux<DataBuffer> cachedFlux = Flux
                        .defer(() -> Flux.just(dataBuffer.slice(0, dataBuffer.readableByteCount())));

                ServerHttpRequest mutatedRequest = new ServerHttpRequestDecorator(exchange.getRequest()) {
                    @Override
                    public Flux<DataBuffer> getBody() {
                        return cachedFlux;
                    }
                };
                # 新增如下代码
                DataBufferUtils.release(dataBuffer);

                return ServerRequest.create(exchange.mutate().request(mutatedRequest).build(), messageReaders)
                        .bodyToMono(inClass).doOnNext(objectValue -> {
                            exchange.getAttributes().put(CACHE_REQUEST_BODY_OBJECT_KEY, objectValue);
                            exchange.getAttributes().put(CACHED_REQUEST_BODY_KEY, cachedFlux);
                        }).map(objectValue -> config.predicate.test(objectValue));
            });

        }
    };
}

Spring Cloud Gateway 在配置的架构中,版本为2.1.1,修改以上代码后,启动项目测试,问题没有复现,正常运行。

同样这个问题,也可以选择升级 Spring Cloud Gateway 版本,在官方2.1.2版本中,此处代码已被重构,升级后测试也完全正常。

以上为个人经验,希望能给大家一个参考,也希望大家多多支持编程网。

--结束END--

本文标题: Spring Cloud Gateway 内存溢出的解决方案

本文链接: https://lsjlt.com/news/130620.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • Spring Cloud Gateway 内存溢出的解决方案
    记 Spring Cloud Gateway 内存溢出查询过程 环境配置: org.springframework.boot : 2.1.4.RELEASE ...
    99+
    2024-04-02
  • Spring Cloud Gateway内存溢出问题如何解决
    本篇内容主要讲解“Spring Cloud Gateway内存溢出问题如何解决”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“Spring Cloud Gateway内存溢出问题如何解决”吧!记 ...
    99+
    2023-06-20
  • docker启动ES内存溢出的解决方案
    在elasticsearch的config中加jvm.options文件,修改堆栈大小,默认是2GB,直接启动es即可,保证之前已经映射了配置文件。 -Xms5g -Xmx5g ...
    99+
    2024-04-02
  • Android 使用帧动画内存溢出解决方案
    Android 使用帧动画内存溢出解决方案 最近在项目遇到的动画效果不好实现,就让UI切成图,采用帧动画实现效果,但是在使用animation-list时,图片也就11张,每张...
    99+
    2022-06-06
    内存溢出 解决方案 动画 Android
  • vue项目内存溢出问题及解决方案
    目录vue项目内存溢出的解决vue项目内存溢出问题问题解决方法1解决方法2总结vue项目内存溢出的解决 最近在对原有项目进行迭代升级,有用代码越来越多,导致内存溢出了。 正常启动运行...
    99+
    2023-01-28
    vue项目内存溢出 vue内存溢出 内存溢出问题
  • PHP内存溢出的解决方法详解
    目录1.处理数组时出现内存溢出2.使用sql查询数据,查出来很多,导致内存溢出3.假定日志中存放的记录数为500000条,那么解决方案如下4.上传excel文件时,出现内存溢出的情况...
    99+
    2024-04-02
  • JVM内存溢出怎么解决
    本篇内容介绍了“JVM内存溢出怎么解决”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!栈溢出(虚拟机栈和本地方法栈)产生原因在HotSpot中...
    99+
    2023-06-22
  • php内存溢出如何解决
    PHP 内存溢出指的是在运行 PHP 脚本时,脚本所使用的内存超出了 PHP 预设的内存限制。解决 PHP 内存溢出问题可以采取以下...
    99+
    2023-09-26
    php
  • tomcat内存溢出如何解决
    Tomcat内存溢出是由于Tomcat运行时所需的内存超过了JVM分配给它的内存限制导致的。为了解决Tomcat内存溢出问题,可以采...
    99+
    2023-09-12
    tomcat
  • redis内存溢出怎么解决
    要解决Redis的内存溢出问题,可以采取以下措施:1. 配置合理的最大内存限制:通过在Redis配置文件中设置`maxmemory`...
    99+
    2023-09-04
    redis
  • python内存溢出如何解决
    在Python中,内存溢出通常是由于程序中使用了过多的内存导致的。解决内存溢出问题的一些常见方法包括:1. 优化算法和数据结构:检查...
    99+
    2023-09-14
    python
  • nodejs怎么解决内存溢出
    本篇内容主要讲解“nodejs怎么解决内存溢出”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“nodejs怎么解决内存溢出”吧!了解Node.js内存管理机制在开始解决内存溢出问题之前,我们需要了...
    99+
    2023-07-05
  • java内存溢出如何解决
    Java内存溢出(Out of Memory Error)是指Java程序在运行过程中申请的内存超出了JVM所能提供的最大内存限制,...
    99+
    2023-10-28
    java
  • Android编程之内存溢出解决方案(OOM)实例总结
    本文实例总结了Android编程之内存溢出解决方案(OOM)。分享给大家供大家参考,具体如下: 在最近做的工程中发现加载的图片太多或图片过大时经常出现OOM问题,找网上资料也提...
    99+
    2022-06-06
    程之 内存溢出 解决方案 Android
  • MySQL OOM(内存溢出)的解决思路
    OOM全称"Out Of Memory",即内存溢出。 内存溢出已经是软件开发历史上存在了近40年的“老大难”问题。在操作系统上运行各种软件时,软件所需申请的内存远远超出了物理内存所承受的大小,就叫内存溢出。 内...
    99+
    2022-05-23
    MySQL oom MySQL 内存溢出 MySQL 内存溢出解决
  • spring cloud gateway转发服务报错的解决
    目录springcloudgateway转发服务报错错误如下解决方案使用gateWay做为网关遇到的404问题GateWay有几个重要的配置,也是最重要的东西我在项目中访问gateW...
    99+
    2024-04-02
  • jvm堆内存溢出如何解决
    JVM堆内存溢出(OutOfMemoryError)的解决方法通常有以下几种:1. 增加堆内存:通过修改JVM启动参数来增加堆内存的...
    99+
    2023-09-27
    jvm
  • weblogic报内存溢出如何解决
    WebLogic报内存溢出的问题可以通过以下步骤来解决:1. 确认内存溢出的原因:查看WebLogic服务器的日志文件或者堆转储文件...
    99+
    2023-09-01
    weblogic
  • java堆内存溢出如何解决
    Java堆内存溢出指的是在Java应用程序中分配给Java堆的内存空间不足,导致无法继续正常执行程序。要解决Java堆内存溢出问题,...
    99+
    2023-08-23
    java
  • java中出现内存溢出如何解决
    本篇文章为大家展示了java中出现内存溢出如何解决,内容简明扼要并且容易理解,绝对能使你眼前一亮,通过这篇文章的详细介绍希望你能有所收获。常用的java框架有哪些1.SpringMVC,Spring Web MVC是一种基于Java的实现了...
    99+
    2023-06-14
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作