Cómo configurar alta disponibilidad para Resource Manager-Parte 6

Cómo configurar alta disponibilidad para Resource Manager-Parte 6

YARN. es la Capa de procesamiento de Hadoop. que consta del Maestro. ( Administrador de recursos. y Slave. (Node Manager) para procesar los datos. Resource Manager (RM). es el componente crítico responsable de la asignación y administración de recursos entre todos los trabajos que se ejecutan en Hadoop Cluster.

Siempre es práctica recomendada y recomendada para tener la alta disponibilidad del clúster (HA). habilitada en servicios críticos. como Namenode. y Resource Manager. .

Requisitos

  • Mejores prácticas para implementar Hadoop Server en CentOS/RHEL 7-Parte 1
  • Configuración de requisitos previos de Hadoop y refuerzo de la seguridad-Parte 2
  • Cómo instalar y configurar Cloudera Manager en CentOS/RHEL 7-Parte 3
  • Cómo instalar CDH y configurar ubicaciones de servicios en CentOS/RHEL 7-Parte 4
  • Cómo Configurar alta disponibilidad para Namenode-Parte 5

En este artículo, veremos los pasos para habilitar Alta disponibilidad. en Resource Manager. .

Habilitación de alta disponibilidad en recursos Manager

1.. Vaya a Cloudera Manager. en las siguientes direcciones y navegue hasta YARN.-> Acciones.-> Habilitar alta disponibilidad.

http://13.233.129.39:7180/cmf/home  Panel de control de Cloudera Manager  Panel de control de Cloudera Manager Panel de Cloudera Manager  Habilitar alta disponibilidad  Habilitar alta disponibilidad Habilitar alta disponibilidad

2.. Seleccione un servidor donde va a tener un segundo Administrador de recursos. Por lo general, tendremos un segundo servidor maestro para implementar la alta disponibilidad. Aquí, seleccionamos master2. para habilitar HA.

 Agregar ancho de host de Resource Manager Agregar host de Resource Manager Agregar Resource Manager Host  Seleccionar hosts de Resource Manager Seleccionar hosts del administrador de recursos Seleccionar hosts de Resource Manager freestar.config.enabled_slots.push

3.. Una vez seleccionado el master2. haga clic en ‘ Continuar. ‘para continuar.

Hosts del administrador de recursos  Administrador de recursos Hosts Hosts de Resource Manager

4.. Se iniciará el proceso de activación de HA. Puede ver las operaciones en segundo plano haciendo clic en cada paso.

 Habilitar proceso de alta disponibilidad  Habilitar proceso de alta disponibilidad Habilitar proceso de alta disponibilidad

5.. Una vez que se completen todos los procesos, estará obteniendo el estado “ Finalizado. . Haga clic en “ Finalizar. .

 Finish High Availability Process Finalizar el proceso de alta disponibilidad Finalizar proceso de alta disponibilidad

6.. Verifique la alta disponibilidad del Administrador de recursos. viendo las instancias de Yarn. en Cloudera Manager.-> YARN.-> Instancias.

Verificar alta disponibilidad  Verify High-Availability Verificar alta disponibilidad

Puede ver dos Resource Manager. uno estará en el estado ‘ Activo., otro estará en ‘ En espera. .

 Verificar la alta disponibilidad de Resource Manager Verificar la alta disponibilidad de Resource Manager Verificar la conclusión de la alta disponibilidad de Resource Manager

En este artículo, hemos seguido el procedimiento paso a paso para habilitar la Alta disponibilidad. en Resource Manager. Siempre que el Administrador de recursos activo. se apague, el Administrador de recursos en espera. se convertirá en Activo. para que la producción no tenga interrupciones.