Попытки OneFS использовать функцию метки узла YARN Apache Hadoop завершаются сбоем

Причина

Решение

• OneFS 7.2.1.2

  • Примените временное решение, указанное ниже

• OneFS 7.2.1.1

  • Сначала примените исправление 164059, а затем реализуйте временное решение, указанное ниже

Временное решение

Реализуйте следующее временное решение, чтобы вручную создать и использовать каталог меток узла YARN, который находится в кластере OneFS, а не в кластере HDFS.  Примечание. Если вы запустили сценарий isilon_hadoop_tools на GitHub, вам не нужно следовать этому временному решению, так как скрипт автоматически создает и разрешает правильный каталог

.Шаг 1. Подготовка OneFS для хранения информации о
метках узловВыполните следующие действия в кластере OneFS.
Примечание: В следующей процедуре HDFS_ROOT_DIR ссылается на корневой каталог HDFS в кластере OneFS.

1. Создайте новый каталог в OneFS для размещения хранилища меток узлов.
   • mkdir -p HDFS_ROOT_DIR/система/ярн/метки-узлов
2. Убедитесь, что пользовательская пряжа существует. Примечание: Если вы еще не создали пользователя с именем yarn, создайте его сейчас.  Сведения о создании пользователей см. в разделе Управление локальными пользователями и группами руководства по администрированию Isilon OneFS CLI.
   • Список пользователей аутентификации ISI
3. Сделайте пользователя yarn владельцем нового каталога.
   • Пряжа Chown HDFS_ROOT_DIR/система/пряжа/узлы-метки
4. Измените уровень разрешений каталога, чтобы разрешить владельцу чтение, запись и выполнение.
   • chmod 700 HDFS_ROOT_DIR/система/пряжа/метки узлов

1. В браузере войдите в Ambari Manager в кластере HDFS.
2. В верхнем баннере панели управления Ambari нажмите Services.
3. На левой панели нажмите YARN.
4. Перейдите на вкладку Конфигурации .
5. Перейдите на вкладку Настройки .
6. Убедитесь, что в разделе Функции YARN для меток узлов установлено значение Включено.
7. Нажмите Save.
8. Перейдите на вкладку Дополнительно .
9. Разверните раздел Расширенный сайт пряжи.
10. Убедитесь, что в поле yarn.node-labels.fs-store.root-dir указан параметр /system/yarn/node-labels по умолчанию.
11. Нажмите Save.