Error de OneFS al intentar utilizar la función de etiqueta de nodo YARN de Apache Hadoop (en inglés)

Causa

Solución

• OneFS 7.2.1.2

  • Implemente la solución alternativa que se proporciona a continuación

• OneFS 7.2.1.1

  • Aplique primero el parche 164059 y, a continuación, implemente la solución alternativa que se proporciona a continuación

Solución alternativa

Implemente la siguiente solución alternativa para crear y usar manualmente un directorio de etiquetas de nodo de YARN que resida en el clúster de OneFS en lugar del clúster de HDFS.  Nota: Si ejecutó el script de isilon_hadoop_tools en GitHub, no es necesario seguir esta solución alternativa, ya que el script crea automáticamente el directorio correcto y otorga permisos al directorio.

Paso 1. Preparar OneFS para almacenar la información de la etiqueta del nodo
Realice los siguientes pasos en el clúster de OneFS.
Nota: En el siguiente procedimiento, HDFS_ROOT_DIR hace referencia al directorio raíz de HDFS en el clúster de OneFS.

1. Cree el nuevo directorio en OneFS para alojar el almacén de etiquetas de nodos.
   • mkdir -p HDFS_ROOT_DIR/sistema/yarn/etiquetas-de-nodo
2. Confirme que el hilo de usuario exista. Nota: Si aún no ha creado un usuario llamado yarn , cree uno ahora.  Para obtener información sobre la creación de usuarios, consulte la sección Administración de usuarios y grupos locales de la Guía de administración de la CLI de Isilon OneFS.
   • Lista de usuarios de isi auth
3. Haga que el usuario yarn sea el propietario del nuevo directorio.
   • Hilo Chown HDFS_ROOT_DIR/sistema/hilo/etiquetas de nodo
4. Cambie el nivel de permisos del directorio para permitir que el propietario lea, escriba y ejecute.
   • CHMOD 700 HDFS_ROOT_DIR/system/yarn/node-labels

1. Mediante un navegador, inicie sesión en Ambari Manager en el clúster HDFS.
2. En el banner superior del panel de Ambari, haga clic en Services.
3. En el panel izquierdo, haga clic en YARN.
4. Haga clic en la pestaña Configs .
5. Haga clic en la pestaña Configuración .
6. En YARN Features, confirme que las etiquetas de nodo estén habilitadas.
7. Haga clic en Guardar.
8. Haga clic en la pestaña Opciones avanzadas .
9. Expanda la sección Yarn-site avanzado.
10. En el campo yarn.node-labels.fs-store.root-dir , confirme que la opción predeterminada /system/yarn/node-labels aparezca en la lista.
11. Haga clic en Guardar.