Platforma PowerFlex pro správu: Volání rozhraní API brány PowerFlex selhává kvůli místu na haldě Java

Summary: Volání API ze systému OpenStack a dalších podobných integrací do platformy PFMP (PowerFlex Management Platform) selhávají kvůli vyčerpání místa haldy Java v podech brány PowerFlex. Problém dočasně vyřeší restartování ovlivněných blokových bran. ...

This article applies to This article does not apply to This article is not tied to any specific product. Not all product versions are identified in this article.
Check out other resources

Symptoms

  • Volání rozhraní API do nástroje PowerFlex Manager (PFMP) občas selhávají, což má vliv na integraci OpenStack a dalších.
  • block-gateway-0 Sestavy podů OutOfMemoryErrora požadavky jsou přesměrovány na block-gateway-1. 
    06:30:21.635 [|https-jsse-nio-443-exec-4-ReceiveLoop-254285513] ERROR c.e.e.n.c.LayeredProtocolConnection - LPC-254285513 #e1a663711aca639e [xxx.xxx.xxx.xxx:8611]: IOException in receive loop: message=null, e=java.io.EOFException, cause=null
06:30:21.635 [|https-jsse-nio-443-exec-5-ReceiveLoop-838015790] ERROR c.e.e.n.c.LayeredProtocolConnection - LPC-838015790 #ed300a36c5228121 [xxx.xxx.xxx.xxx:8611]: IOException in receive loop: message=null, e=java.io.EOFException, cause=null
06:30:23.475 [|https-jsse-nio-443-exec-11] ERROR c.e.s.s.w.c.SpecialImplController - Got an exception in handleException
org.springframework.web.util.NestedServletException: Handler dispatch failed; nested exception is java.lang.OutOfMemoryError: Java heap space
  • Nakonec block-gateway-1 Pod také hlásí OutOfMemoryError. 
    07:03:30.663 [|https-jsse-nio-443-exec-15] WARN  o.s.w.s.m.m.a.ExceptionHandlerExceptionResolver - Failure in @ExceptionHandler com.emc.s3g.scaleio.web.controller.RestApiController#handleException(Exception, HttpServletRequest, HttpServletResponse)
java.lang.OutOfMemoryError: Java heap space
07:03:42.234 [|https-jsse-nio-443-exec-5-ReceiveLoop-793498724] ERROR c.e.e.n.c.LayeredProtocolConnection - LPC-793498724 #7f7d737257ceb2e0 [10.41.209.52:8611]: Problem with message deserialization
java.lang.OutOfMemoryError: Java heap space
07:03:42.234 [|https-jsse-nio-443-exec-12] ERROR c.e.s.s.s.ConnectionServiceImpl - Got rc MESSAGE_DESERIALIZATION_FAILED for command QueryPoll
  • catalina.out Protokoly indikují selhání v HostConfig.checkResources(), což naznačuje vyčerpání paměti během ověřování prostředků. 
    16-Jan-2025 06:31:21.628 SEVERE [Catalina-utility-2] org.apache.catalina.core.ContainerBase.threadStart Exception processing background thread
        Caused by: java.lang.OutOfMemoryError: Java heap space
                at org.apache.catalina.startup.HostConfig.checkResources(HostConfig.java:1298)
  • Metriky prostředků nezobrazují žádnou významnou spotřebu procesoru nebo paměti ovlivněnými pody brány. 
    Namespace                   Name                                                     CPU Requests  CPU Limits  Memory Requests  Memory Limits  Age
---------                   ----                                                     ------------  ----------  ---------------  -------------  ---
powerflex                   block-legacy-gateway-1                                   0 (0%)        0 (0%)      0 (0%)           0 (0%)         56d
powerflex                   ciam-service-8c98989cb-5prsg                             100m (0%)     0 (0%)      128Mi (0%)       0 (0%)         56d
powerflex                   block-legacy-gateway-0                                   0 (0%)        0 (0%)      0 (0%)           0 (0%)         56d

Důsledky

  • Volání rozhraní API do PFMP občas selhávají, což může mít vliv na automatizaci a operace správy.
  • Pody brány přestanou reagovat kvůli vyčerpání místa haldy Java.
  • K obnovení služby je nutný ruční zásah.

 

Cause

This issue is triggered by block-legacy-gateway POST requests and the following API requests: "/api/gatewayLogin", "/api/logout", and "/api/gatewayLogout". The pod handling these requests does not fully release the associated memory upon completion, leading to a memory leak.

 

Resolution

Restartujte dotčenou block-gateway pody pomocí následujícího příkazu:

kubectl -n powerflex rollout restart statefulset block-legacy-gateway

 

 

Additional Information

Dotčené verze

PFMP v4.6.0.x a v4.6.1

Opraveno ve verzi

PFMP v4.6.2 a vyšší

 

Article Properties
Article Number: 000297144
Article Type: Solution
Last Modified: 24 Mar 2025
Version:  1
Find answers to your questions from other Dell users
Support Services
Check if your device is covered by Support Services.