VNXe: SP-panic due of "BMD buffer CRC mismatch" (op te lossen door Dell EMC)

SP kan in paniek raken en ervoor zorgen dat FS offline gaat.

Corruptie wordt veroorzaakt door een zeer zeldzaam timingprobleem. 
Onder enkele zeldzame omstandigheden raakt code een racevoorwaarde tijdens het updaten van IB (indirecte blokken) en BMD CRC wordt bijgewerkt door 2 threads tegelijk en veroorzaakt daarom deze corruptie. 
En ook de verwachte iCRC in BMD Entry was anders met entry in BMD Cache, dus het meldde dat BMD Cache niet overeenkwam.

A 05/02/21 06:58:50.014 cbfs 6fd7b701 c4_safe_ktrace CBFSA: UFS: 6: bmd_icrc:0x762bd332 bmd_crc:0xe04c355f bmd_owner:8338

Wanneer een FS/LUN online komt na een dergelijke situatie, moet worden geprobeerd zo snel mogelijk een back-up van de gegevens te maken. Vermijd verdere schrijfbewerkingen naar die LUN/FS. Er is een grote kans dat LUN/offline kan gaan tijdens nieuwe schrijfbewerkingen erop.  FS/LUN zou zich in de offline status hebben bevonden nadat dit probleem was opgetreden.

De technische support moet herstel uitvoeren om het online te krijgen.  Neem contact op met de technische support van Dell EMC of uw geautoriseerde servicepartner en vermeld de ID van dit Knowledge Base-artikel.

Triage logs:
-----------
A 05/02/21 06:58:50.014 cbfs 6fd7b701 c4_safe_ktrace CBFSA: UFS: 6: bmd_state: 30 (versie 0) flags:
A 05/02/21 06:58:50.014 cbfs 6fd7b701 c4_safe_ktrace CBFSA: UFS: 6: ICRC_TRUSTED:SET
A 05/02/21 06:58:50.014 cbfs 6fd7b701 c4_safe_ktrace CBFSA: UFS: 6: CRC_TRUSTED:SET
A 05/02/21 06:58:50.014 cbfs 6fd7b701 c4_safe_ktrace CBFSA: UFS: 6: bmd_icrc:0x762bd332 bmd_crc:0xe04c355f bmd_owner:8338 <<<
<<<<<<bmd_offset:4057293012993 bmd_totalWeight:261755 bmd_replcaId:64908 bmd_versionSetId:1 bmd_gen:32768 bmd_blockgen:0 bmd_seqnum=5874
A 05/02/21 06:58:50.014 cbfs 6fd7b701 c4_safe_ktrace CBFSA:  UFS: 3: FS 1073741844 ontkoppelen: Reden: BMD buffer CRC mismatch
A 05/02/21 06:58:50.014 cbfs 6fd7b701 c4_safe_ktrace CBFSA: CBFS Event Id 77579616268, Event Message: FsId: 1073741844 een kritieke fout,
actie (PANIC_SYSTEM), FS CBFS Event Id 77579616268, Event Message: (Bestandssysteem offline gehaald (BMD-buffer CRC komt niet overeen)) is ontkoppeld
CBFS Event Id 77579616268, Event Message: intern.