PowerProtect: Data Manager ESDB: datos demasiado grandes, datos para la actividad

Actividades de PowerProtect Data Manager como las siguientes: Los procesos de respaldo, restauración o replicación se ven afectados debido a un problema con Elasticsearch.

• Se observan los siguientes errores en el índice index_activity de Elasticsearch:

                  "reason": Object {
                      "caused_by": Object {
                          "caused_by": Object {
                              "bytes_limit": Number(858993459),
                              "bytes_wanted": Number(859222328),
                              "durability": String("PERMANENT"),
                              "reason": String("[fielddata] Data too large, data for [_id] would be [859222328/819.4mb], which is larger than the limit of [858993459/819.1mb]"),
                              "type": String("circuit_breaking_exception"),
                          },
                          "reason": String("CircuitBreakingException[[fielddata] Data too large, data for [_id] would be [859222328/819.4mb], which is larger than the limit of [858993459/819.1mb]]"),
                          "type": String("execution_exception"),
                      },
                      "reason": String("java.util.concurrent.ExecutionException: CircuitBreakingException[[fielddata] Data too large, data for [_id] would be [859222328/819.4mb], which is larger than the limit of [858993459/819.1mb]]"),
                      "type": String("exception"),
                  },
                  "shard": Number(0),
              },

• Los registros de Elasticsearch indican lo siguiente:

  org.elasticsearch.transport.RemoteTransportException: [local][127.0.0.1:14400][indices:data/read/search[phase/query]]
  Caused by: org.elasticsearch.search.query.QueryPhaseExecutionException: Query Failed [Failed to execute main query]
          at org.elasticsearch.search.query.QueryPhase.executeInternal(QueryPhase.java:228) ~[elasticsearch-7.17.17.jar:7.17.17]
          at org.elasticsearch.search.query.QueryPhase.execute(QueryPhase.java:98) ~[elasticsearch-7.17.17.jar:7.17.17]
          at org.elasticsearch.search.SearchService.loadOrExecuteQueryPhase(SearchService.java:459) ~[elasticsearch-7.17.17.jar:7.17.17]
          at org.elasticsearch.search.SearchService.executeQueryPhase(SearchService.java:623) ~[elasticsearch-7.17.17.jar:7.17.17]
          at org.elasticsearch.search.SearchService.lambda$executeQueryPhase$2(SearchService.java:484) ~[elasticsearch-7.17.17.jar:7.17.17]
          at org.elasticsearch.action.ActionRunnable.lambda$supply$0(ActionRunnable.java:47) [elasticsearch-7.17.17.jar:7.17.17]
          at org.elasticsearch.action.ActionRunnable$2.doRun(ActionRunnable.java:62) ~[elasticsearch-7.17.17.jar:7.17.17]
          at org.elasticsearch.common.util.concurrent.AbstractRunnable.run(AbstractRunnable.java:26) [elasticsearch-7.17.17.jar:7.17.17]

• Se encontró que el tamaño de elasticsearch del índice index_activity era de 21,6 GB

  ┌─────┬────────┬────────┬───────────────────────────┬────────────────────────┬─────┬─────┬────────────┬──────────────┬────────────┬────────────────┐
  │ ##  ┆ health ┆ status ┆ index                     ┆ uuid                   ┆ pri ┆ rep ┆ docs.count ┆ docs.deleted ┆ store.size ┆ pri.store.size │
  ╞═════╪════════╪════════╪═══════════════════════════╪════════════════════════╪═════╪═════╪════════════╪══════════════╪════════════╪════════════════╡
  │ 1   ┆ green  ┆ open   ┆ index_activity            ┆ VCi1Df7tQLemZrSnYLyHZg ┆ 1   ┆ 0   ┆ 87971760   ┆ 8576108      ┆ 21.6gb     ┆ 21.6gb         │
  │ 2   ┆ green  ┆ open   ┆ index_protection_copy_set ┆ NzMVnlX_RPG0v3dUXXGznA ┆ 1   ┆ 0   ┆ 15634865   ┆ 4026853      ┆ 6gb        ┆ 6gb            │
  │ 3   ┆ green  ┆ open   ┆ index_asset_protection_de ┆ nujLQyzmRTuCsDlR5ncvBw ┆ 1   ┆ 0   ┆ 6131465    ┆ 1282123      ┆ 3.4gb      ┆ 3.4gb          │
  │     ┆        ┆        ┆ tail                      ┆                        ┆     ┆     ┆            ┆              ┆            ┆                │
  │ 4   ┆ green  ┆ open   ┆ index_protection_copy     ┆ JPGjWiwUS0Wilw87QWE_OA ┆ 1   ┆ 0   ┆ 2542590    ┆ 277569       ┆ 2.1gb      ┆ 2.1gb          │

• Observamos una alta utilización del proceso ESDB donde la CPU aumenta hasta un 900 %

El problema se encontró con el índice index_activity Elasticsearch.
El nodo se sobrecarga cuando se calcula la cantidad de memoria que necesita un campo para cargarse en el montón de JVM. Evita la carga de datos de campo mediante la generación de una excepción si el montón de operaciones supera el límite.

Se redujo el tamaño de capacidad del índice ESDB:index_activity para eliminar documentos obsoletos de la tabla, lo que mejora el rendimiento general de ESDB.
Dado que se trata de una tarea interna, ¡NO considere realizar ningún cambio por su cuenta!
Esta actividad requiere atención de soporte, presente una solicitud de servicio al equipo de Dell.