PowerProtect Data Protection, IDPA: L'utilità Rapid Upgrade ChecKer mostra un errore

2

POST /versions

Impossibile eseguire query sulla versione del firmware perché PTAgent non è in esecuzione (o PTA e iSM/iDRAC non sono disponibili).

9001

Failed to connect to PTAgent.

Failed to connect to PTAgent. Check PTAgent status or IP connection.

3

POST /versions

Impossibile eseguire query sulla versione del firmware perché ISM non è in esecuzione.

Nota: quando ISM viene arrestato, PTAgent potrebbe richiedere fino a 3 minuti per elaborare alcune richieste REST, ad esempio POST /host/swinventory e POST /host/lc.

9002

Failed to query SW inventory from PTAgent (HttpStatus.SERVICE_UNAVAILABLE).

Failed to query SW inventory from PTAgent (HttpStatus.SERVICE_UNAVAILABLE). Check iSM/iDRAC status.

4

POST /versions

Impossibile eseguire query sulla versione del firmware perché iDRAC non è pronto.

9003

Failed to query SW inventory from PTAgent (HttpStatus.BAD_GATEWAY).

Failed to query SW inventory from PTAgent (HttpStatus.BAD_GATEWAY). Check iDRAC/iSM status.

5

POST /precheck

Impossibile eseguire query sulla versione del firmware perché PTAgent non è in esecuzione (o PTA e iSM/iDRAC non sono disponibili).

9004

Failed to connect to PTAgent.

Failed to connect to PTAgent. Check PTAgent status or IP connection.

6

POST /precheck

Controllo preliminare del firmware non riuscito perché ISM non è in esecuzione.

Nota: quando ISM viene arrestato, PTAgent potrebbe richiedere fino a 3 minuti per elaborare alcune richieste REST, ad esempio POST /host/swinventory e POST /host/lc.

9005

Failed to query SW inventory from PTAgent (HttpStatus.SERVICE_UNAVAILABLE).

Failed to query SW inventory from PTAgent (HttpStatus.SERVICE_UNAVAILABLE). Check iSM/iDRAC status.

7

POST /precheck

Controllo preliminare del firmware non riuscito perché iDRAC non è pronto.

9006

Failed to query SW inventory from PTAgent (HttpStatus.BAD_GATEWAY).

Failed to query SW inventory from PTAgent (HttpStatus.BAD_GATEWAY). Check iDRAC/iSM status.

8

POST/readinesscheck

ReadinessCheck non riuscito perché PTAgent non è in esecuzione (o PTA e iSM/iDRAC non sono disponibili).

N/D

Failed to connect to PTAgent.

Failed to connect to PTAgent. Check PTAgent status or IP connection.

9

POST /readinesscheck

ReadinessCheck non riuscito perché iSM non è in esecuzione (o iSM e iDRAC non sono disponibili).

N/D

Failed to query host summary from PTAgent (HttpStatus.SERVICE_UNAVAILABLE).

Failed to query host summary from PTAgent (HttpStatus.SERVICE_UNAVAILABLE). Check iSM/iDRAC status."

Failed to query host summary from Node Event Service (HttpStatus.SERVICE_UNAVAILABLE). Check iSM/iDRAC status."

10

POST /readinesscheck

ReadinessCheck non riuscito perché iDRAC non è pronto.

N/D

Failed to query host summary from PTAgent (HttpStatus.BAD_GATEWAY).

Failed to query host summary from PTAgent (HttpStatus.BAD_GATEWAY). Check iDRAC/iSM status.

Failed to query host summary from Node Event Service (HttpStatus.BAD_GATEWAY). Check iDRAC/iSM status.

11

POST /readinesscheck

ReadinessCheck non riuscito perché iDRAC è in modalità di ripristino.

N/D

Lifecycle Controller is in recovery mode.

Lifecycle Controller is in recovery mode. Clear the recovery mode before FW update.

12

POST /readinesscheck

ReadinessCheck non riuscito perché sono presenti alcuni processi in sospeso nella coda dei processi iDRAC.

N/D

There are some pending jobs in the iDRAC job queue.

There are some pending jobs in the iDRAC job queue. Clear iDRAC job queue before FW update

13

POST /update

GET /activities/{id}
(> solo IDPA 2.4)

Il processo di aggiornamento del firmware è bloccato allo 0% di download, causando l'esito negativo delle attività successive.

9012

Failed to unpack firmware payload.

Failed to unpack firmware payload. Check if the iDRAC LC job queue is clear.

14

POST /update

GET /activities/{id}

Impossibile aggiornare il firmware perché PTAgent non è in esecuzione.

9013

Failed to connect to PTAgent.

Failed to connect to PTAgent. Check PTAgent status or IP connection.

15

POST /update

GET /activities/{id}
(> solo IDPA 2.4)

Impossibile aggiornare il firmware perché ISM non è in esecuzione.

Nota: quando ISM viene arrestato, PTAgent potrebbe richiedere fino a 3 minuti per elaborare alcune richieste REST. In questo caso potrebbe restituire un errore di timeout.

9014

Failed to process firmware payload with PTAgent (HttpStatus.SERVICE_UNAVAILABLE).

Failed to process firmware payload with PTAgent (HttpStatus.SERVICE_UNAVAILABLE). Check iSM/iDRAC status.

16

POST /update

GET /activities/{id}

Impossibile aggiornare il firmware perché iDRAC non è pronto.

9015

Failed to process firmware payload with PTAgent (HttpStatus.BAD_GATEWAY).

Failed to process firmware payload with PTAgent (HttpStatus.BAD_GATEWAY). Check iDRAC/iSM status.

17

GET /precheck

Controllo preliminare del firmware non riuscito a causa di un errore "No FW profile found".

9017

Nessun profilo FW trovato per <il modello> IDPA.

No FW profile found <IDPA model>. Ensure that the correct ID Module is installed.

POST /postupdate

GET /activities/{id}

POST /postupdate

GET /activities/{id}

POST /preupdate

GET /activities/{id}

POST /preupdate

GET /activities/{id}

Failed to perform pre-requisite tasks due to an internal error.

POST /update

GET /activities/{id}

FW payload file is not found. Add the firmware payload path to the request body and then retry the FW update API.

POST /update

GET /activities/{id}

Failed to update firmware due to an internal error. Check PTAgent/iSM/iDRAC status and review logs for details.

POST /preupdate

GET /activities/{id}

POST /postupdate

GET /activities/{id}

Impossibile eseguire le attività post-aggiornamento perché PTAgent non è in esecuzione.

POST /postupdate

GET /activities/{id}

Failed to perform postupdate tasks due to an internal error.

Timeout while waiting for the REST API response

POST /postupdate

GET /activities/{id}

ESXi host failed to exit maintenance mode. Check ESXi host status and ensure vSAN is in a healthy state.

POST /postupdate

GET /activities/{id}

Timeout while waiting for host up and running
Check ESXi host status and ensure vSAN is in a healthy state.

POST /update

GET /activities/{id}

Il tempo di attesa massimo per il ripristino del sistema è stato superato. Check iDRAC and PTAgent status.

Failed to verify if the current firmware is valid. 

POST /update

GET /activities/{id}

POST /readinesscheck

ReadinessCheck non riuscito perché PTAgent non è in esecuzione (o il servizio PTA non è disponibile).

N/D

PTAgent is not available and active now.

PTAgent is not available and active now. Check PTAgent Service status or IP connection.

POST /readinesscheck

ReadinessCheck non riuscito perché ISM non è in esecuzione (o il servizio è obsoleto o disabilitato).

N/D

The cached response with Node Event Service is disabled.

Node Event Service is in a degraded state, iDRAC Service Module is not available or active now.

Diversi problemi noti:

Consultare l'articolo 219231 Integrated Data Protection Appliance: la risposta memorizzata nella cache con il servizio Node Event è disabilitata. Il servizio eventi del nodo è danneggiato a causa di una route duplicata 169.254.0.1 

Consultare l'articolo 199266 IDPA e PowerProtect DP Series Appliance: il servizio ISM risulta non in esecuzione su iDRAC e potrebbe non avviarsi dopo un riavvio o un ripristino. L'utilità PowerProtect DP Rapid Upgrade Checker non riesce durante il controllo firmware_readiness (in inglese) 

Consultare l'articolo 197174 PowerProtect Data Protection Appliances, IDPA: PowerProtect Data Protection Rapid Upgrade Checker ha segnalato un errore 

di verifica preliminare dell'aggiornamento del firmware Consultare l'articolo 219233 Integrated Data Protection Appliance: La risposta memorizzata nella cache ha danneggiato la cartella ESXi /tmp piena 

1. Accedere tramite SSH all'host ESXi ed eseguire il seguente comando per correggere la configurazione di PTAgent REST_ip:

• /opt/dell/DellPTAgent/tools/pta_cfg set rest_ip=https://<host_internal_IP>:8086

• /etc/init.d/DellPTAgent status

• /etc/init.d/DellPTAgent start

• /etc/init.d/DellPTAgent restart

2. Per evitare ulteriori errori di controllo preliminare, accedere a tutti gli host ESXi e controllare manualmente lo stato del servizio PTAgent. Se un servizio Dell PTAgent è inattivo, avviarlo manualmente.

1. Accedere a un host ESXi in cui viene rilevato il problema ISM.
2. Eseguire il comando:
   1. /etc/init.d/dcism-netmon-watchdog status

1. 2. /etc/init.d/dcism-netmon-watchdog start 

1. Accedere tramite SSH a iDRAC dalla CLI di ACM utilizzando il comando "ssh root@<iDRAC-IP-Address>" (per recuperare l'indirizzo IP di iDRAC, è possibile utilizzare il seguente comando: enum_instances OMC_IPMIIPProtocolEndpoint root/cimv2 | grep IPv4Address).
2. Eseguire il comando racadm jobqueue delete -i JID_CLEARALL_FORCE
3. Attendere 5 minuti per l'esecuzione di iDRAC.

Esempio:

racadm>>racadm jobqueue delete -i JID_CLEARALL_FORCE
RAC1032: JID_CLEARALL_FORCE job was canceled by the user.
racadm>> 

Se l'interfaccia utente di iDRAC indica "Not running (TLS error)" per iSM, applicare la seguente soluzione alternativa:

1. Accedere a un host ESXi in cui viene rilevato il problema ISM.
2. Eseguire i comandi:
   1. /etc/init.d/dcism-netmon-watchdog stop
   2. /etc/init.d/dcism-netmon-watchdog start install

1. Accedere a un host ESXi in cui viene rilevato il problema ISM.
2. Eseguire il comando:
   1. /etc/init.d/dcism-netmon-watchdog status 

2. 2. /etc/init.d/dcism-netmon-watchdog stop
3. /etc/init.d/dcism-netmon-watchdog start

Il riavvio potrebbe richiedere circa 5 minuti.

4. Reimpostare l'iDRAC
   1. Connettersi tramite SSH a iDRAC dalla CLI di ACM utilizzando il comando ssh root@<iDRAC-IP-Address> (Per recuperare l'indirizzo IP di iDRAC, è possibile utilizzare il seguente comando: enum_instances OMC_IPMIIPProtocolEndpoint root/cimv2 | grep IPv4Address
   2. Eseguire il comando: racadm racreset soft

1. Accedere tramite SSH ad ACM
2. Verificare se dpatools 2.3.0 o versione successiva è già installato.

• Per verificarlo, eseguire: rpm -qa | grep dpatools

3. Verificare se il pacchetto del firmware "IDPA-10.308-10.308.tar.gz" è già disponibile in "/usr/local/dpatools/bin/payload".
4. Eseguire il comando: dpacli -fwupdate /usr/local/dpatools/bin/payload/IDPA-10.308-10.308.tar.gz -skipReboot

Al completamento di questo comando, iDRAC versione 3.36.103.36 viene installato su tutti i nodi.

5. Cliccare sul pulsante Revalidate nell'interfaccia utente di Upgrade per eseguire nuovamente i controlli preliminari all'aggiornamento.

Uno dei possibili motivi di questo errore è che alcuni script di attività client sono mancanti sugli host ESXi.
Ciò può verificarsi se l'host ESXi non viene spento e riacceso durante il processo di ricreazione dell'immagine.
Per verificare e correggere questo problema, attenersi alla seguente procedura:

1. Da SSH a host ESXi
2. Annotare l'elenco dei file presenti nell'/scratch/dell/extern' cartella.
3. Accedere tramite SSH ad ACM
4. Annotare l'elenco dei file presenti nell'/usr/local/dpatools/bin/clienttask' cartella.
5. Se non tutti i file contenuti nella cartella di ACM sono presenti nella cartella di ESXi, utilizzare SCP per trasferire i file negli host ESXi.
6. Riprovare a eseguire l'aggiornamento dalla relativa interfaccia utente.
7. Se il problema persiste, contattare il supporto.

Un altro possibile motivo di questo errore è che dpatools-service non è stato aggiornato correttamente.

Per verificare la versione di dpatools-service, seguire le istruzioni riportate di seguito:

1. Accedere tramite SSH ad ACM
2. Verificare se la versione di destinazione di dpatools-service è già installata 

              rpm -qa | grep dpatools-service

 Se l'errore si verifica durante ESXi e il firmware, applicare la versione più recente di DPATools, seguire la procedura riportata di seguito per risolvere il problema:

1.  Eseguire il comando CLI DPATools per aggiornare il firmware su tutti gli host: 

dpacli -fwworkflow /usr/local/dpatools/bin/payload/IDPA-<version>-<version>.tar.gz

2. Eseguire Upgrade Sync dall'interfaccia utente di Upgrade.
3. Se il problema persiste, contattare il supporto.

Uno dei possibili motivi di questo errore è che si è verificato un problema con il firmware NVMe PM1735 o la scheda riser PCIe.

Per impostazione predefinita, PTAgent esegue automaticamente la scansione dei dispositivi e memorizza nella cache le proprietà del dispositivo di storage.
PTAgent non è riuscito a trovare il componente "PhysicalDisk" in hwInventory poiché non è in grado di analizzare i dati dalla scheda NVMe PM1735 nello slot n. 4.

Per risolvere questo problema, è possibile applicare le seguenti soluzioni alternative:

1. Aggiornare il firmware NVMe/PCIe 1735 alla versione 2.3.0 (per l'unità NVMe 1735, è accettabile la versione 2.0.2 o successiva).
   1. Scaricare 14G FW 2021-December-Block dal sito della pagina del prodotto del supporto Dell : 
   2. Estrarre il pacchetto, il contenuto contiene 1735 FW Express-Flash-PCIe-SSD_Firmware_RP8RC_WN64_2.3.0_A03.EXE.
   3. Abilitare la modalità di servizio sull'appliance eseguendo il seguente comando su ACM:  dpacli -servicemode
   4. Aggiornare manualmente il firmware NVMe 1735 alla versione 2.3.0 tramite iDRAC. 
   5. Eseguire un ciclo di accensione e spegnimento dell'appliance per eseguire il commit di un aggiornamento del firmware. 

2. Se la procedura descritta in precedenza non funziona e il problema persiste, tentare una sequenza di spegnimento:
   1. Abilitare la modalità di servizio sull'appliance eseguendo il seguente comando su ACM: dpacli -servicemode
   2. Spegnere il sistema
   3. Scollegare il cavo di alimentazione
   4. Tenere premuto il tasto di accensione per 10 secondi
   5. Collegare il cavo di alimentazione
   6. Accendere il sistema
3. Se i passaggi 1 e 2 elencati in precedenza non risolvono il problema, potrebbe trattarsi di un problema di slot o riser.
   1. Sostituire la scheda riser PCIe.