Código de evento de OpenShift: 1030NODO0001

La presión extrema de la CPU puede causar una serialización lenta y un rendimiento deficiente de kube-apiserver y etcd. Cuando esto sucede, existe el riesgo de que los clientes vean solicitudes de API que no responden y se vuelven a emitir, lo que causa aún más presión en la CPU.

También puede causar fallas en los sondeos de ejecución debido a la lentitud de la capacidad de respuesta de etcd en el back-end. Si un kube-apiserver falla en esta condición, es probable que experimente una cascada, ya que los kube-apiservers restantes también están infraaprovisionados.

Esta alerta se activa cuando hay una utilización alta sostenida de la CPU en un solo nodo del plano de control.

La urgencia de esta alerta está determinada por el tiempo que el nodo mantiene un alto uso de CPU:

• Crítica
  • cuando el uso de CPU en un nodo de plano de control individual es superior al 90 % durante más de 1 h.
• Advertencia
  • cuando el uso de CPU en un nodo de plano de control individual es superior al 90 % durante más de 5 meses.

Esta alerta se activa cuando la utilización de CPU en los tres nodos del plano de control es mayor de lo que pueden soportar dos nodos del plano de control; Una interrupción en un nodo de un solo plano de control puede causar una falla en cascada; aumentar la CPU disponible.

La urgencia de esta alerta se determina por el tiempo que la utilización de CPU en los tres nodos del plano de control es mayor que la que pueden soportar dos nodos del plano de control.

• Advertencia
  • cuando la utilización de CPU en los tres nodos del plano de control es mayor que la que dos nodos del plano de control pueden sostener durante más de 10 m.

Diagnóstico:

Ejecute las siguientes consultas de PromQL en la consola web de OCP para obtener ayuda con el diagnóstico (Observe las métricas de → → ejecute consultas).
Los 5 principales contenedores con la mayor utilización de CPU en un nodo en particular:

Estas son las condiciones que podrían activar la alerta:

• Hay una nueva carga de trabajo que genera más llamadas al servidor API y causa un alto uso de la CPU. En este caso, aumente la CPU y la memoria en los nodos del plano de control.
• la alerta se activa en función de las métricas del nodo, por lo que podría ser que un componente en el nodo esté causando el alto uso de CPU.
• apiserver/etcd está procesando más solicitudes debido a reintentos del cliente causados por una condición subyacente.
• Distribución desigual de las solicitudes a la(s) instancia(s) de apiserver debido a http2 (multiplexa las solicitudes a través de una única conexión TCP). Los balanceadores de carga no están en el nivel de la aplicación y, por lo tanto, no entienden http2.

Mitigación:

• Si una carga de trabajo genera una carga en el servidor API que provoca un alto uso de la CPU, aumente la CPU y la memoria en los nodos del plano de control.
• Si el alto uso sostenido de la CPU se debe a una degradación del clúster:
  • Averigüe la causa raíz de la degradación y, a continuación, determine los próximos pasos en consecuencia.

Soporte:

Si todos los pasos anteriores no pueden resolver el problema, póngase en contacto con el soporte técnico de Dell EMC para una investigación más detallada.

Si se recolecta el paquete de registros, los datos de Prometheus también se pueden volcar como materiales complementarios.
Cómo realizar un volcado de los datos del clúster de Prometheus: