Com configurar l'alta disponibilitat per al gestor de recursos - Part 6


YARN és la capa de processament de Hadoop, que consta dels serveis Mestre (Gestor de recursos) i Esclau (Gestor de nodes) per processar les dades. El Gestor de recursos (RM) és el component crític responsable de l'assignació i gestió de recursos entre tots els treballs que s'executen a Hadoop Cluster.

Sempre es recomana i la millor pràctica tenir l'alta disponibilitat de clúster (HA) habilitat en serveis crítics com Namenode i Resource Manager.

  • Pràctiques recomanades per implementar el servidor Hadoop a CentOS/RHEL 7 - Part 1
  • Configuració dels requisits previs i l'enduriment de la seguretat de Hadoop - Part 2
  • Com instal·lar i configurar el gestor de Cloudera a CentOS/RHEL 7 - Part 3
  • Com instal·lar CDH i configurar ubicacions de serveis a CentOS/RHEL 7 - Part 4
  • Com configurar l'alta disponibilitat per a Namenode - Part 5

En aquest article, veurem els passos per habilitar l'alta disponibilitat al Gestor de recursos.

Habilitació de l'alta disponibilitat al Gestor de recursos

1. Aneu a Cloudera Manager a les adreces següents i navegueu a YARN -> Accions -> Activa l'alta disponibilitat.

http://13.233.129.39:7180/cmf/home

2. Seleccioneu un servidor on tindreu un segon gestor de recursos. Normalment, tindrem un segon servidor mestre per desplegar Alta Disponibilitat. Aquí, estem seleccionant master2 per habilitar HA.

3. Un cop seleccionat el master2, feu clic a Continua per continuar.

4. S'iniciarà el procés d'habilitació d'HA. Podeu veure les operacions de fons fent clic a cada pas.

5. Un cop finalitzats tots els processos, obtindreu l'estat Finalitzat. Feu clic a Finalitzar.

6. Verifiqueu l'alta disponibilitat del gestor de recursos visualitzant les instàncies de Yarn a Cloudera Manager –> YARN –> Instàncies.

Podeu veure dos gestors de recursos, un estarà a l'estat Activat, un altre a En espera.

En aquest article, hem seguit el procediment pas a pas per habilitar l'alta disponibilitat al Gestor de recursos. Sempre que el gestor de recursos actiu cau, el gestor de recursos en espera esdevindrà actiu perquè la producció no tingui cap interrupció.