Isilon HDFS: "STATUS_IO_TIMEOUT" mientras se realiza la operación "HDFS LS" en el nodo de computación
Summary: La operación "hdfs ls" desde un nodo de computación en el sistema de archivos Isilon puede fallar de forma intermitente con el error "ls: Error al crear contexto de seguridad para el usuario oozie causa: STATUS_IO_TIMEOUT: estado: STATUS_IO_TIMEOUT = 0xC00000B5" ...
Symptoms
Cuando se realiza una operación "hdfs ls" desde un nodo de computación en el sistema de archivos Isilon, diferentes usuarios fallarán intermitentemente con el siguiente error:
[oozie@hdp ~]$ hdfs dfs -ls /
ls: Error al crear contexto de seguridad para el usuario oozie causa: STATUS_IO_TIMEOUT: estado: STATUS_IO_TIMEOUT = 0xC00000B5
Verá errores relacionados en Isilon hdfs,log para la misma operación:
java.io.IOException cause: Error al crear contexto de seguridad para el usuario <xxxx/yyyy@zzz.com> causa: STATUS_IO_TIMEOUT: estado: STATUS_IO_TIMEOUT = 0xC00000B5
Cause
Esto puede deberse a dos razones:
1) Una entrada de DNS defectuosa en Isilon. No podremos consultar el nombre de zona de SmartConnect en estos servidores DNS de groupnet asociados mediante "nslookup" y "dig".
1. Para enumerar los servidores DNS configurados en Isilon:
# isi network groupnets
list 2. Para comprobar si podemos consultar el FQDN configurado en el servidor HDFS con los servidores DNS presentes en Isilon:
# nslookup <FQDN><DNS server>
# dig @<dns server IP><FQDN>
2) Problemas de conectividad de dominio entre Isilon y el dominio asociado utilizado en la zona de acceso. Tanto el dominio principal como el de confianza deben poder comunicarse con Isilon sin problemas. Puede comprobar si hay dominios que no se puedan resolver examinando los mensajes en /var/log/lsassd.log,
Resolution
# isi network groupnets modify <groupnet ID> --remove-dns-servers=<IP
>de servidor DNS defectuosa Si no se puede acceder al dominio de confianza principal o alguno de los dominios de confianza asociados o están en estado offline, debemos realizar una solución de problemas más exhaustiva para profundizar en el problema subyacente.
La guía de solución de problemas para dominios offline es un buen punto de partida: http://www.emc.com/collateral/TechnicalDocument/docu63151.pdf