Isilon HDFS: "STATUS_IO_TIMEOUT", mens du udfører "HDFS LS"-handling på en beregningsnode
Summary: 'hdfs ls'-handling fra en computernode på Isilon-filsystemet mislykkes muligvis periodisk med fejlen "ls: Der opstod en fejl under oprettelse af sikkerhedskontekst for brugeren oozie årsag: STATUS_IO_TIMEOUT: Status: STATUS_IO_TIMEOUT = 0xC00000B5" ...
Symptoms
Når du udfører en 'hdfs ls'-handling fra en computernode på Isilon-filsystemet, vil forskellige brugere periodisk mislykkes med nedenstående fejl:
[oozie@hdp ~]$ hdfs dfs -ls /
ls: Der opstod en fejl under oprettelse af sikkerhedskontekst for brugeren oozie årsag: STATUS_IO_TIMEOUT: Status: STATUS_IO_TIMEOUT = 0xC00000B5
Du vil se relaterede fejl på Isilon hdfs,log for den samme operation:
java.io.IOException årsag: Der opstod en fejl under oprettelse af sikkerhedskontekst for bruger <xxxx/yyyy@zzz.com> årsag: STATUS_IO_TIMEOUT: Status: STATUS_IO_TIMEOUT = 0xC00000B5
Cause
Dette kan skyldes to årsager:
1) En defekt DNS-post på Isilon. Vi vil ikke være i stand til at forespørge Smartconnect-zonenavnet mod disse tilknyttede groupnet DNS-servere ved hjælp af 'nslookup' og 'dig'.
1. Sådan vises de DNS-servere, der er konfigureret på listen Isilon:
# isi network groupnets 2
. Sådan kontrollerer du, om vi kan forespørge på det konfigurerede FQDN på HDFS-serveren med de DNS-servere, der findes på Isilon:
# nslookup <FQDN><DNS-serveren>
# dig @<dns server IP><FQDN>
2) Problemer med domæneforbindelsen mellem Isilon og det tilknyttede domæne, der bruges i adgangszonen. Både primære og betroede domæner skal kunne kommunikere med Isilon uden problemer. Du kan kontrollere, om der er domæner, som ikke kan løses, ved at undersøge meddelelser i /var/log/lsassd.log,
Resolution
# isi network groupnets modify <groupnet ID> --remove-dns-servers=<Faulty DNS server IP
>Hvis det primære eller et af de tilknyttede domæner, der er tillid til, ikke kan nås eller er i offline-status, er vi nødt til at foretage yderligere fejlfinding for at grave det underliggende
problem.
Fejlfindingsvejledningen til domæne offline er et godt sted at starte: http://www.emc.com/collateral/TechnicalDocument/docu63151.pdf