Isilon HDFS: "STATUS_IO_TIMEOUT" під час виконання операції 'hdfs ls' на обчислювальному вузлі
Summary: Операція 'hdfs ls' з обчислювального вузла у файловій системі Isilon може періодично відмовляти з помилкою "ls: Причина, що створює контекст безпеки для користувача: STATUS_IO_TIMEOUT: статус: STATUS_IO_TIMEOUT = 0xC00000B5" ...
Symptoms
Під час виконання операції 'hdfs ls' з обчислювального вузла у файловій системі Isilon різні користувачі періодично зазнають невдач із наведеною нижчою помилкою:
[oozie@hdp ~]$ hdfs dfs -ls /
ls: Причина, що створює контекст безпеки для користувача: STATUS_IO_TIMEOUT: статус: STATUS_IO_TIMEOUT = 0xC00000B5
Ви побачите пов'язані помилки на Isilon hdfs, log для тієї ж операції:
java.io.IOException причини: Причина, створення контексту безпеки користувача <xxxx/yyyy@zzz.com> : STATUS_IO_TIMEOUT: статус: STATUS_IO_TIMEOUT = 0xC00000B5
Cause
Це може бути спричинено двома причинами:
1) Несправний DNS-запис на Isilon. Ми не зможемо запитувати назву зони Smartconnect до цих пов'язаних DNS-серверів groupnet за допомогою 'nslookup' та 'dig'.
1. Щоб перелічити DNS-сервери, налаштовані на Isilon:
# isi network groupnets list
2. Щоб перевірити, чи можемо ми запитати налаштований FQDN на HDFS-сервері з DNS-серверами, присутніми на Isilon:
# nslookup <FQDN><DNS сервер>
# dig @<dns server IP><FQDN>
2) Проблеми з підключенням домену між Isilon та відповідним доменом, що використовується в зоні доступу. І первинний, і довірений домени повинні мати змогу спілкуватися з Ісілоном без жодних проблем. Ви можете перевірити домени, які неможливо розв'язати, переглянувши повідомлення у /var/log/lsassd.log,
Resolution
# isi network groupnets modify <groupnet ID> --remove-dns-servers=<Несправна IP-адреса>
DNS-сервера Якщо основний або будь-який із пов'язаних довірених доменів недоступні або перебувають у офлайн-статусі, потрібно провести подальше усунення проблем, щоб розібратися з основною
проблемою.
Посібник з усунення несправностей для офлайн-домену — гарне місце для початку: http://www.emc.com/collateral/TechnicalDocument/docu63151.pdf