Connectrix: come risolvere i problemi di comunicazione tra nodo Fibre Channel e porta dello switch o SFP mediante eliminazione. Supporto in autonomia (in inglese)

Come risolvere i problemi relativi al nodo Fibre Channel nella porta dello switch o i problemi di comunicazione SFP tramite eliminazione?

Troppe sostituzioni SFP proattive
Errore di collegamento
Porta G
Nessuna indicazione visiva
Not Operational Sequence (NOS)
Off Line Sequence (OLS)
Perdita di segnale
SFP guasto
Risoluzione dei problemi sulla porta FC
Errori sulla porta FC

Troppi SFP sostituiti in modo proattivo mentre il problema si trova al di fuori dell'SFP o dello switch.

Per risolvere il problema:

1. Identificare il nodo e la porta dello switch coinvolti nell'errore di comunicazione.
2. Verificare che la porta dello switch sia attiva a livello amministrativo (sbloccata, non chiusa) o abilitata.
3. Assicurarsi che siano disponibili percorsi ridondanti per il dispositivo collegato prima di procedere.

4. Per escludere l'SFP dal problema, procedere come segue:

5. Individuare la porta libera sullo switch.
6. Disabilitare la porta libera identificata sullo switch.
7. Spostare il cavo dalla porta da esaminare alla nuova porta libera disabilitata nel passaggio precedente.
8. Modificare la porta disabilitata allo stato abilitato (o attivo a livello amministrativo) e riportare il dispositivo online.
9. Cancellare/azzerare le statistiche e i contatori sullo switch.

Per Brocade, consultare l'articolo della KB: 

Connectrix B-Series Brocade: come azzerare i contatori di interfaccia e ASIC su switch e director Connectrix Brocade - B-Series (in inglese) 

Per Cisco, consultare l'articolo della KB: 

Connectrix - MDS-Series Cisco: come azzerare i contatori di interfaccia e ASIC su MDS (in inglese)

10. Monitorare la porta con i rispettivi comandi per 4-6 ore.

RISULTATI:

• Se i contatori di errore aumentano, il problema si trova all'esterno dello switch ed è necessario consigliare al cliente/utente/amministratore SAN quanto riportato di seguito:

• • L'SFP e il cavo della nuova porta richiedono pulizia. Per evitare contaminazioni sull'SFP di un cavo sporco, prendere in considerazione l'utilizzo di un kit di pulizia professionale.
  • Il dispositivo collegato deve essere analizzato ulteriormente da chiunque lo supporti.
  • Sullo switch Cisco, se lo stato "errdisabled" viene nuovamente visualizzato senza alcun incremento dei contatori, è necessario aprire una SR per ulteriori indagini sul back-end.

• Se gli errori non aumentano (o lo stato Errdisabled sullo switch Cisco non si ripresenta), l'SFP sulla porta precedente è difettoso: aprire una SR per la sostituzione dell'SFP fornendo i risultati dell'analisi sopra riportati, tra cui gli output di registro e i dettagli dell'SFP (SM o MM, velocità e così via)

I guasti hardware possono essere facilmente isolati applicando un semplice algoritmo al problema; se non si tratta di questo componente hardware, il problema riguardo l'altro. Eseguire un loop fino a isolare l'errore che indica l'hardware problematico.


ESEMPI DI BROCADE:

Esempio 1           ENC OUT con LINK FAIL e LOSS SYNC:

porterrshow        :
CURRENT CONTEXT -- 3 , 111
     frames        enc  crc  crc    too   too   bad  enc   disc  link  loss  loss  frjt  fbsy  c3timeout    pcs
     tx     rx     in   err  g_eof  shrt  long  eof  out   c3    fail  sync  sig               tx    rx     err
xx:  849.1k 493.2k 0    0    0      0     0     0    2.3m  0     4     6     0     0     0     0      0     0

Motivo generico:
Valido solo se le statistiche sulle porte sono state cancellate nelle ultime 24 ore. In caso contrario, classificare questi contatori come storici. Cancellare le statistiche sulle porte (come elencato in precedenza al punto 9), controllare i contatori e riacquisire i dati dopo 4-6 ore.

Dagli errori, è possibile vedere l'errore link fail e l'errore loss of sync oltre a enc out, che possono anche comprendere un errore loss sig.
Queste combinazioni di errori in genere indicano un riavvio dell'host o un ripristino del collegamento esterno allo switch. Gli errori enc out si verificano durante la negoziazione della velocità come parte dell'inizializzazione del collegamento.

Azioni previste:
Verificare che il dispositivo collegato alla porta abbia un motivo legittimo per passare offline e/oppure online, ad esempio, il riavvio dell'host. In caso contrario, aprire una SR.

Esempio 2           ENC OUT:

porterrshow        :
CURRENT CONTEXT -- 3 , 111
     frames        enc  crc  crc    too   too   bad  enc   disc  link  loss  loss  frjt  fbsy  c3timeout    pcs
     tx     rx     in   err  g_eof  shrt  long  eof  out   c3    fail  sync  sig               tx    rx     err
xx:  849.1k 493.2k 0    0    0      0     0     0    2.3m  0     0     0     0     0     0     0      0     0

Motivo generico:
Valido solo se le statistiche sulle porte sono state cancellate nelle ultime 24 ore. In caso contrario, classificare questi contatori come storici. Cancellare le statistiche sulle porte (come elencato in precedenza al punto 9), controllare i contatori e riacquisire i dati dopo 4-6 ore.

Gli errori enc out senza eventuali errori associati indicano un cavo sporco.

Azioni previste:
Controllare e pulire tutte le superfici ottiche sul cavo e sull'SFP collegati a questa porta e ai dispositivi collegati.


Esempio 3     CRC e CRC G_EOF:

porterrshow        :
CURRENT CONTEXT -- 3 , 111
     frames        enc  crc  crc    too   too   bad  enc   disc  link  loss  loss  frjt  fbsy  c3timeout    pcs
     tx     rx     in   err  g_eof  shrt  long  eof  out   c3    fail  sync  sig               tx    rx     err
xx:  849.1k 493.2k 0    1.2k 1.2k   0     0     0    0     0     0     0     0     0     0     0      0     0

Motivo generico:
Valido solo se le statistiche sulle porte sono state cancellate nelle ultime 24 ore. In caso contrario, classificare questi contatori come storici. Cancellare le statistiche sulle porte (come elencato in precedenza al punto 9), controllare i puntatori e riacquisire i dati dopo 4-6 ore.

Il frame accede alla porta dello switch con un CRC errato, ma con l'estremità del frame ancora contrassegnata come corretta.
Ciò indica che questa è la prima porta a registrare il frame errato, quindi il problema è rappresentato da SFP/cavo/interfaccia del dispositivo collegato su questa porta specifica.

Azioni previste:
Vedere l'azione predefinita nella risoluzione.

Per una porta ISL, cancellare le statistiche (come elencato in precedenza al punto 9), controllare i contatori e riacquisire i dati dopo 4-6, quindi raccogliere supportsave da entrambi gli switch e aprire una SR per la normale risoluzione dei problemi.

Esempio 4     CRC:

porterrshow        :
CURRENT CONTEXT -- 3 , 111
     frames        enc  crc  crc    too   too   bad  enc   disc  link  loss  loss  frjt  fbsy  c3timeout    pcs
     tx     rx     in   err  g_eof  shrt  long  eof  out   c3    fail  sync  sig               tx    rx     err
xx:  849.1k 493.2k 0    1.2k 0      0     0     0    0     0     0     0     0     0     0     0      0     0

Motivo generico:
Valido solo se le statistiche sulle porte sono state cancellate nelle ultime 24 ore. In caso contrario, classificare questi contatori come storici. Cancellare le statistiche sulle porte (come elencato in precedenza al punto 9), controllare i contatori e riacquisire i dati dopo 4-6 ore.

La porta registra un frame che entra nello switch con un frame CRC errato, ma con il frame già contrassegnato come errato. Normalmente, questo si verifica su porte ISL e NPIV F.

Azioni previste:
Se gli errori CRC vengono registrati sulla porta NPIV, fare esaminare il dispositivo dal fornitore di manutenzione.
Per una porta ISL, controllare nella fabric la presenza di eventuali porte che registrino crc g_oef e azioni come nell'esempio 3.

Esempio 5     PCS ERR con LINK FAIL e LOSS SYNC:

porterrshow        :
CURRENT CONTEXT -- 3 , 111
     frames        enc  crc  crc    too   too   bad  enc   disc  link  loss  loss  frjt  fbsy  c3timeout    pcs
     tx     rx     in   err  g_eof  shrt  long  eof  out   c3    fail  sync  sig               tx    rx     err
xx:  849.1k 493.2k 0    0    0      0     0     0    0     0     4     4     0     0     0     0      0     466

Motivo generico:
Valido solo se le statistiche sulle porte sono state cancellate nelle ultime 24 ore. In caso contrario, classificare questi contatori come storici. Cancellare le statistiche sulle porte (come elencato in precedenza al punto 9), controllare i contatori e riacquisire i dati dopo 4-6 ore.

Questo vale solo per le piattaforme che supportano porte da 10 Gb/s o 16 Gb/s e velocità superiori (6505/6510/6520/DCX-8510) ed è stato introdotto con Condor3 ASIC, la piattaforma GEN5.

ER_PCS_BLK mostra il numero di errori di blocco Physical Coding Sublayer (PCS). Questo contatore equivale a enc_out per un collegamento da 8 Gb/4 Gb e viene utilizzato solo per la velocità di 10 GB e 16 Gb e velocità superiori.
Dagli errori, possiamo vedere errori link fail e loss of sync oltre a errori pcs err, che possono anche includere errori loss sig.
Queste combinazioni di errori in genere indicano un riavvio dell'host o il ripristino del collegamento esterno allo switch.
Gli errori pcs err si verificano durante la negoziazione della velocità come parte dell'inizializzazione del collegamento.

Azioni previste:
Verificare che il dispositivo collegato alla porta abbia un motivo legittimo per passare offline e/oppure online, ad esempio, il riavvio dell'host. In caso contrario, aprire una SR.

Esempio 6     PCS ERR:

porterrshow        :
CURRENT CONTEXT -- 3 , 111
     frames        enc  crc  crc    too   too   bad  enc   disc  link  loss  loss  frjt  fbsy  c3timeout    pcs
     tx     rx     in   err  g_eof  shrt  long  eof  out   c3    fail  sync  sig               tx    rx     err
xx:  849.1k 493.2k 0    0    0      0     0     0    0     0     0     0     0     0     0     0      0     466

Motivo generico:
Valido solo se le statistiche sulle porte sono state cancellate nelle ultime 24 ore. In caso contrario, classificare questi contatori come storici. Cancellare le statistiche sulle porte (come elencato in precedenza al punto 9), controllare i contatori e riacquisire i dati dopo 4-6 ore.

Gli errori PSC ERR senza eventuali errori associati indicano un cavo sporco.

Azioni previste:
Controllare e pulire tutte le superfici ottiche sul cavo e sull'SFP collegati a questa porta e ai dispositivi collegati.

ESEMPI CISCO:

Esempio 1    Errdisabled:

Errdisabled: nessun incremento degli errori di interfaccia
 

fc1/1 is down (Error disabled - bit error rate too high)
    Hardware is Fibre Channel, SFP is short wave laser w/o OFC (SN).
    5 minutes input rate 0 bits/sec, 0 bytes/sec, 0 frames/sec
    5 minutes output rate 0 bits/sec, 0 bytes/sec, 0 frames/sec
      179 frames input, 7668 bytes
        0 discards, 0 errors
        0 CRC,  0 unknown class
        0 too long, 0 too short
      23 frames output, 1320 bytes
        0 discards, 0 errors
      1 input OLS, 1 LRR, 0 NOS, 1 loop inits
      2 output OLS, 0 LRR, 0 NOS, 1 loop inits
    Interface last changed at Thu Jun  5 01:51:00 2014

Motivo generale:
Lo stato "Errdisabled" di un'interfaccia può essere a tratti fuorviante, in quanto i contatori dell'interfaccia possono essere puliti sul front-end, lo switch sembra inattivo nella porta con stato "Errdisabled" e i contatori di errore aumentano sul back-end (ASIC/interno/scheda di linea).

Azioni previste:
Vedere l'azione predefinita nella risoluzione. Se si verifica nuovamente, raccogliere l'output dei dettagli del supporto tecnico e aprire una SR.
 

• Cavo difettoso o di cattiva qualità
• SFP guasto o non valido
• L'SFP è specificato per il funzionamento a 1 Gb/s, ma viene utilizzato a 2 Gb/s.
• L'SFP è specificato per il funzionamento a 2 Gb/s, ma viene utilizzato a 4 Gb/s.
• Il cavo a breve distanza viene utilizzato per lunghe distanze e viceversa.
• Perdita momentanea di sincronizzazione
• Collegamento del cavo allentato su una o entrambe le estremità
• Connessione SFP errata su una o entrambe le estremità

Viene rilevata una soglia del tasso di errore bit quando si verificano 15 burst di errore in un periodo di 5 minuti. Per impostazione predefinita, lo switch disabilita l'interfaccia quando viene raggiunta la soglia. È possibile inserire i comandi riportati di seguito in sequenza per riabilitare l'interfaccia.

shutdown
no shutdown

Esempio 2:   CRC

Incremento di CRC
 

fc13/1 is down (Initializing)
    Port description is ***
    Hardware is Fibre Channel, SFP is long wave laser cost reduced.
    5 minutes input rate 32 bits/sec, 4 bytes/sec, 0 frames/sec
    5 minutes output rate 32 bits/sec, 4 bytes/sec, 0 frames/sec
      162 frames input, 6136 bytes
        0 discards, 17 errors
        17 CRC,  0 unknown class
        0 too long, 17 too short
      74 frames output, 6304 bytes
        2 discards, 0 errors
      108 input OLS, 54 LRR, 2 NOS, 0 loop inits
      83 output OLS, 26 LRR, 56 NOS, 0 loop inits
    Interface last changed at Tue May 27 08:37:20 2014

Motivo genico:

La porta sta registrando un frame che entra nello switch con un CRC difettoso, ma un'estremità del frame valida. Il contatore di CRC aumenta solo sulla porta di ingresso specifica registrando l'errore ed eventuali indagini devono essere eseguite su questo collegamento fisico.

Azioni previste:
Vedere l'azione predefinita nella risoluzione.

Cancellare le statistiche delle porte (come elencato in precedenza al punto 9), controllare i contatori e riacquisire i dati dopo 4-6 ore.

Esempio 3: NOS

Non-Operational Sequence (NOS)

show int fc1/1 counters
fc1/1
    5 minutes input rate 1753296 bits/sec, 219162 bytes/sec, 199 frames/sec
    5 minutes output rate 2310384 bits/sec, 288798 bytes/sec, 194 frames/sec
    2741512190 frames input, 2542476084276 bytes
      0 class-2 frames, 0 bytes
      2741512190 class-3 frames, 2542476084276 bytes
      0 class-f frames, 0 bytes
      0 discards, 0 errors, 0 CRC
      0 unknown class, 0 too long, 0 too short
    3410405365 frames output, 5164364339412 bytes
      0 class-2 frames, 0 bytes
      3410405365 class-3 frames, 5164364339412 bytes
      0 class-f frames, 0 bytes
      0 discards, 0 errors
    1 input OLS, 1 LRR, 0 NOS, 307 loop inits
    289 output OLS, 289 LRR, 289 NOS, 289 loop inits
    0 link failures, 0 sync losses, 0 signal losses
     48276 BB credit transitions from zero
      16 receive B2B credit remaining
      3 transmit B2B credit remaining
      3 low priority transmit B2B credit remaining

Motivo genico:

Perdita di connessione prima delle negoziazioni di collegamento.

Azioni previste:
Controllare il livello 1 (livello fisico) e il dispositivo di origine.