Connectrix Brocade série B : Commutateur de directeur à l’état arrêté et désactivé, avec de nombreux composants à l’état défectueux

Impact:
Interrupteur vers le bas
Commutateur désactivé.
Blocs d’alimentation défectueux.
Lames de carottage défectueuses.
Lames de port défectueuses

Problème :
Directeur Commutateur en état de désactivation avec lame de port / lames principales et plusieurs alimentations à l’état

défectueux Sorties du commutateur :

slotshow -m :

ID de type de lame de logement Nom du modèle État
--------------------------------------------------
1 SW BLADE 96 FC16-48 FAULTY (28)
2 SW BLADE 96 FC16-48 FAULTY (28)
  3 UNKNOWN VACANT
4 UNKNOWN VACANT
5 CORE BLADE 98 CR16-8 FAULTY (50)
6 CP BLADE 50 CP8 ENABLED
7 CP BLADE 50 CP8 ENABLED
8 CORE BLADE 98 CR16-8 FAULTY (50)
9 UNKNOWN VACANT
10 UNKNOWN VACANT
 LAME 11 SW 96 FC16-48 DÉFECTUEUSE (28)
LAME 12 SW 96 FC16-48 DÉFECTUEUSE (28)


Errdump :
Diffusion en continu des messages C2-1011 et C2-1014 dans la même seconde.
                Environ 80 messages ou plus vus à partir de la même lame.
 
[C3-1011], 25508, LOGEMENT 6 | CHASSIS, WARNING, switchName, Detected a complete loss of credit on internal back-end VC : Logement 2, port -1(0) vc_no=0 crd(s)lost=4.
[C3-1014], 25509, LOGEMENT 6 | CHASSIS, WARNING, switchName, Link Reset on Port S2,P-1(0) vc_no=0 crd(s)lost=4 auto trigger.
[tronqué]
[C3-1011], 25508, LOGEMENT 6 | CHASSIS, WARNING, switchName, Detected a complete loss of credit on internal back-end VC : Logement 2, port -1(0) vc_no=0 crd(s)lost=4.
[C3-1014], 25509, LOGEMENT 6 | CHASSIS, WARNING, switchName, Link Reset on Port S2,P-1(0) vc_no=0 crd(s)lost=4 auto trigger.
 
Suivi d’une erreur de vérification du logiciel :
[RAS-1004], 25572, SLOT 6 | FFDC | CHÂSSIS, AVERTISSEMENT, NOM_COMMUTATEUR, erreur de vérification du logiciel détectée.
 
Suivi d’une défaillance des blocs d’alimentation :
[RAS-1001], 25573, SLOT 6 | CHASSIS, INFO, switchName, First failure data capture (FFDC) event occurred.
[EM-1034], 25574, LOGEMENT 6 | CHASSIS, ERROR, switchName, PS 1 défini sur défectueux, rc=2000e.
[EM-1034], 25575, LOGEMENT 6 | CHASSIS, ERROR, switchName, PS 2 défini sur défectueux, rc=2000e.
[EM-1034], 25576, LOGEMENT 6 | CHASSIS, ERROR, switchName, PS 4 défini sur défectueux, rc=2000e.
 
Ensuite, le commutateur est passé à l’état désactivé, en raison de défaillances de la lame principale :
[PLAT-1072], 25577, SLOT 6 | FFDC | CHASSIS, CRITICAL, switchName, Le châssis est désactivé car aucune lame principale n’est disponible. Insérez/remplacez une ou les deux lames principales et exécutez le chassisenable.
[RAS-1006], 25578, LOGEMENT 6 | CHASSIS, INFO, switchName, Support data file (switchName-S6cp-201608281317-core_files.tar) transférés automatiquement à l’adresse distante ' x.x.x.x '.
[RAS-1001], 25579, LOGEMENT 6 | CHASSIS, INFO, switchName, First failure data capture (FFDC) event occurred.
 
Suivis des messages d’erreur de lame de port et de lame principale.
[EM-1134], 25580, LOGEMENT 6 | FFDC | CHASSIS, ERROR, switchName, Slot 1 défini sur défectueux, rc=2001c.
[EM-1134], 25581, LOGEMENT 6 | FFDC | CHASSIS, ERROR, switchName, Slot 2 défini sur défectueux, rc=2001c.
[EM-1134], 25582, LOGEMENT 6 | FFDC | CHASSIS, ERROR, switchName, Slot 11 défini sur défectueux, rc=2001c.
[EM-1134], 25583, LOGEMENT 6 | FFDC | CHASSIS, ERROR, switchName, Slot 12 défini sur défectueux, rc=2001c.
[EM-1134], 25584, LOGEMENT 6 | FFDC | CHASSIS, ERROR, switchName, Slot 5 défini sur défectueux, rc=20032.
[EM-1134], 25585, LOGEMENT 6 | FFDC | CHASSIS, ERROR, switchName, Slot 8 défini sur défectueux, rc=20032.
 
Suivi de tous les messages d’information du matériel signalé comme défectueux :
[FW-1010], 25588, SLOT 6 | FID 1, WARNING, switchName, Env Power Supply 1, est inférieur à la limite basse (High=0, Low=1). La valeur actuelle est 0 (1 OK/0 DÉFECTUEUX).
[FW-1010], 25589, LOGEMENT 6 | FID 1, WARNING, switchName, Env Power Supply 2, est inférieur à la limite basse (High=0, Low=1). La valeur actuelle est 0 (1 OK/0 DÉFECTUEUX).
[FW-1010], 25590, LOGEMENT 6 | FID 1, WARNING, switchName, Env Power Supply 4, est inférieur à la limite basse (High=0, Low=1). La valeur actuelle est 0 (1 OK/0 DÉFECTUEUX).
 
[FW-1424], 25591, LOGEMENT 6 | FID 1, WARNING, switchName, Switch status changed from HEALTHY to DOWN.
[FW-1439], 25592, LOGEMENT 6 | FID 1, WARNING, switchName, Switch status change contributor factor Switch offline.
 
[FW-1427], 25593, LOGEMENT 6 | FID 1, WARNING, switchName, switch status change contributor factor Alimentation : 3 mauvais.
 
[FW-1010], 25594, LOGEMENT 6 | FID 128, WARNING, switchName, Env Power Supply 1, est inférieur à la limite basse (High=0, Low=1). La valeur actuelle est 0 (1 OK/0 DÉFECTUEUX).
[FW-1010], 25595, LOGEMENT 6 | FID 128, WARNING, switchName, Env Power Supply 2, est inférieur à la limite basse (High=0, Low=1). La valeur actuelle est 0 (1 OK/0 DÉFECTUEUX).
[FW-1010], 25596, LOGEMENT 6 | FID 128, WARNING, switchName, Env Power Supply 4, est inférieur à la limite basse (High=0, Low=1). La valeur actuelle est 0 (1 OK/0 DÉFECTUEUX).
 
[FW-1424], 25597, LOGEMENT 6 | FID 128, WARNING, switchName, l’état du commutateur est passé de HEALTHY à DOWN.
[FW-1439], 25598, LOGEMENT 6 | FID 128, WARNING, switchName, Switch status change contributor factor Switch offline.
[FW-1427], 25599, LOGEMENT 6 | FID 128, WARNING, switchName, changement d’état du commutateur facteur contributif Alimentation : 3 mauvais.
 
 
[RAS-1001], 25601, LOGEMENT 6 | CHASSIS, INFO, switchName, First failure data capture (FFDC) event occurred.
[EM-1010], 25602, LOGEMENT 6 | FFDC | CHASSIS, CRITICAL, switchName, mise hors tension inattendue reçue pour le logement 1, mais le logement 1 est toujours sous tension.
[EM-1069], 25603, LOGEMENT 6 | CHASSIS, INFO, switchName, le logement 1 est en cours de mise hors tension.
[EM-1010], 25604, LOGEMENT 6 | FFDC | CHASSIS, CRITICAL, switchName, mise hors tension inattendue reçue pour le logement 2, mais le logement 2 est toujours sous tension.
[tronqué]
 
Mêmes messages pour les autres blocs d’alimentation.
[EM-1009], 25612, LOGEMENT 6 | FFDC | CHASSIS, CRITICAL, switchName, Slot 5 powered unexpectedly.
[EM-1069], 25613, LOGEMENT 6 | CHASSIS, INFO, switchName, le logement 5 est en cours de mise hors tension.
[EM-1009], 25614, LOGEMENT 6 | FFDC | CHASSIS, CRITICAL, switchName, Slot 8 powered down unexpectedly.
[EM-1069], 25615, LOGEMENT 6 | CHASSIS, INFO, switchName, le logement 8 est en cours de mise hors tension.

Matériel défectueux entraînant une surutilisation du bus I2C sur le fond de panier, provoquant une réaction en chaîne dans le directeur, sa propre protection et la mise hors tension d’autres composants matériels.
 
- Le premier composant à tomber en panne était la lame de port dans l’emplacement 2 (peut être n’importe lequel).
- Messages en continu d’ASIC défectueux (dans le raslog) et de défaillances de composants de la lame, entraînant une surutilisation du bus I2C.
- Le bus I2C, à son tour, n’a pas été en mesure de transmettre d’autres messages au système d’exploitation, y compris les messages de vérification des autres composants matériels.
- Il en résulte que 3 alimentations sur les 4 passent à l’état défectueux, et parce que les alimentations étaient définies sur défectueuses et qu’il ne restait plus qu’une seule alimentation, le commutateur a commencé à éteindre les autres lames.
- Lorsque les lames principales ont été mises hors tension, le commutateur est automatiquement passé à l’état désactivé, car un commutateur directeur n’est pas capable de fonctionner correctement sans 2 lames centrales.

Plan d’action suggéré au cas où la lame du logement 2 serait défectueuse. (voir le slotshow sous l’énoncé de problème ci-dessus.)
 
L’objectif est de rétablir l’état stable du commutateur, puis de remplacer le matériel défectueux.
Plan d’action :
- Retirez (ne retirez) pas la lame de l’emplacement 2 et ne la remettez pas en place.
- Désinstallez (ne retirez pas) la lame des logements 1, 5, 8, 11 et 12.
- RÉINSTALLEZ les alimentations 1, 2 et 4. Ou éteignez et rallumez l’interrupteur à bascule des 3 alimentations à l’arrière.
- L’alimentation doit d’abord être rétablie sur les blocs d’alimentation avant de pouvoir poursuivre les étapes suivantes.
- Si l’alimentation est rétablie, (possibilité de vérifier avec la commande psshow, et de vérifier si les alimentations sont correctes.) Reculez la lame centrale dans les logements 5 et 8. (Vérification possible avec les commandes errdump et slotshow.)
- Une fois que les 2 lames du noyau sont en place, l’interrupteur doit être ok pour être activé. Pour ce faire, utilisez la commande switchenable.
- Une fois le commutateur activé (vérifiez avec les commandes switchshow et errdump), commencez à réinstaller les lames de port une par une. (PAS la lame de port dans le logement 2) Commencez par la lame de port 1.
- ATTENDEZ 5 à 10 minutes jusqu’à ce que la lame soit en place et que tous les ports connectés aient eu le temps de se connecter et de se connecter.
- Lame de selle suivante dans le logement 11. Encore une fois, ATTENDEZ 5 à 10 minutes, même activité qu’avec la lame de port 1.
- Lame d’orifice de siège suivant dans l’emplacement 12.
- Vérifiez après chaque insertion, à l’aide de la commande errdump, si le POST réussit. Et la commande switch show si les ports sont en ligne.
 
Une fois que toutes les lames (sauf celle du logement 2) sont en ligne, la lame défectueuse peut être remplacée.