PowerFlex: legge til enhetsfeil i sporingslogger Tidsbudsjett overskredet" og IO_HARD_ERROR
Summary: Problem med å legge til nye enheter i VxFlex OS (ScaleIO). Feil i sporingslogger sier "Tidsbudsjettet er overskredet" og IO_HARD_ERROR
Symptoms
Prøve å legge til en ny enhet i et SDS i VxFlex-operativsystemet
Kunden prøver å legge til den nye enheten i SDS og får feilmelding
Følgende er feilene i MDM-sporingsloggene mens du legger til enheten:
04/02 07:44:39.847673 0x7fe714c7deb0:mosEventLog_PostInternal:00590: New event added. Message: "Command add_sds_device received, User: 'USERNAME'. [464880250]". Additional info: "SDS: Name: SDSNAME, SDS Device: name N/A path /dev/sdab, Storage Pool: sas_10k_4, Test Mode: 'Test and activate' Test Time: 0 force_device_takeover flag: Specified" Severity: Info
04/02 07:44:44.435265 0x7fe714c7deb0:mosEventLog_PostInternal:00590: New event added. Message: "Command add_sds_device was not successful. Error code: Add SDS device IO error [464880250]". Additional info: "ID: 0000000000000000" Severity: Warning
I henhold til SDS Trace-logger ser vi følgende feil: -
04/02 07:44:43.589785 0x7f6b739aaeb0:AddDevProgress_Trace:00255: AddDevProgress: osThreadId=11cd, devId=3fefb6ae00110006, Start=25f2ee8825 [usec], end=25f2ee9888 [usec], interval= 4195 [usec], Desc=Write PhyDevCombArr
04/02 07:44:44.380440 0x7f6b739aaeb0:file_DoIOSyncEx:02237: Time budget exceeded on reading from /dev/sdab
04/02 07:44:44.380569 0x7f6b739aaeb0:file_ReadIntern:01169: Read error from disk 1548199195, 8 IO_HARD_ERROR
04/02 07:44:44.380653 0x7f6b739aaeb0:file_DoIOSyncEx:02237: Time budget exceeded on reading from /dev/sdab
04/02 07:44:44.380697 0x7f6b739aaeb0:file_ReadIntern:01169: Read error from disk 1548199195, 8 IO_HARD_ERROR
04/02 07:44:44.380777 0x7f6b739aaeb0:contDev_SendDeviceError:01761: Sending device error to MDM: DevId:3fefb6ae00110006 deviceName: /dev/sdab readError: TRUE WriteError: FALSE
04/02 07:44:44.415846 0x7f6b739aaeb0:file_WriteIntern:00937: Write error to disk 64, 2 IO_HARD_ERROR
04/02 07:44:44.415978 0x7f6b739aaeb0:file_WriteIntern:00937: Write error to disk 64, 2 IO_HARD_ERROR
04/02 07:44:44.416061 0x7f6b739aaeb0:contDev_SendDeviceError:01761: Sending device error to MDM: DevId:3fefb6ae00110006 deviceName: /dev/sdab readError: TRUE WriteError: TRUE
04/02 07:44:44.426672 0x7f6b739aaeb0:phyDev_InitWithBuf:02279: Io error
04/02 07:44:44.426839 0x7f6b739aaeb0:mosAsyncIO_CloseFileIntern:00503: Closing device path:/dev/sdab
Cause
Med fokus på hendelsene "Tidsbudsjettet overskredet", ser det ut til at denne enheten enten er for treg til å bli lagt til, eller det er maskinvareproblemer som enten kan være kontrollerproblemet eller en dårlig blokk på disken ovenfor.
En del av testfasen når du legger til en ny enhet, må SIO kunne skrive ~200 MB data på ~4,5 sekunder. Det kan være på grunn av kontrollerproblemer eller dårlige blokker mot enheten, eller problemet ser ut til å være at disken er for treg, når vi ser feilen "Tidsbudsjett overskredet" og IO_HARD_ERROR
Resolution
Dette er ikke et problem med VxFlex OS. Dette er mer et maskinvareproblem.
Maskinvareleverandøren må engasjeres for undersøkelse.
1. Kontroller om det er problemer med RAID-kontrolleren.
2. Sjekk om det er problemer på disken, eller om det er en treg disk.
3. Hvis mulig, prøv å få en annen disk og legg den til. Hvis den nye disken er lagt til, ville det bety at den tidligere disken hadde problemer.
4. Hvis flere nye disker står overfor det samme problemet når de legges til en SDS, ser du etter problemene på RAID-kontrolleren. Kontroller også at RAID-kontrollerdriveren/fastvaren har støttede versjoner.