Ricerca nel sito web

Come impostare l'alta disponibilità per Resource Manager – Parte 6


YARN è il Processing Layer di Hadoop, che consiste del Master (Resource Manager) e dello Slave servizi (Node Manager) per elaborare i dati. Resource Manager (RM) è il componente critico responsabile dell'allocazione e della gestione delle risorse tra tutti i lavori in esecuzione in Hadoop Cluster.

È sempre consigliabile e costituisce una best practice avere la Cluster High Availability (HA) abilitata sui servizi Critical come Namenode e Resource Manager.

Requisiti

  • Best practice per la distribuzione del server Hadoop su CentOS/RHEL 7 – Parte 1
  • Configurazione dei prerequisiti Hadoop e rafforzamento della sicurezza – Parte 2
  • Come installare e configurare Cloudera Manager su CentOS/RHEL 7 – Parte 3
  • Come installare CDH e configurare i posizionamenti dei servizi su CentOS/RHEL 7 - Parte 4
  • Come impostare l'alta disponibilità per Namenode – Parte 5

In questo articolo vedremo i passaggi per abilitare Alta disponibilità su Resource Manager.

Abilitazione della disponibilità elevata in Resource Manager

1. Vai su Cloudera Manager ai seguenti indirizzi e vai a YARN –> Azioni –> Abilita disponibilità elevata.

http://13.233.129.39:7180/cmf/home

2. Seleziona un server in cui avrai un secondo Gestore risorse. Di solito avremo un secondo server master per implementare l'alta disponibilità. Qui stiamo selezionando master2 per abilitare HA.

3. Una volta selezionato il master2, fai clic su "Continua" per procedere.

4. Verrà avviato il processo di abilitazione HA. È possibile visualizzare le operazioni in background facendo clic su ciascun passaggio.

5. Una volta completati tutti i processi, riceverai lo stato "Finito". Fai clic su "Fine".

6. Verifica la disponibilità elevata di Resource Manager visualizzando le istanze Yarn in Cloudera Manager –> YARN –> Istanze.

Puoi vedere due Gestore risorse, uno sarà nello stato "Attivo", l'altro sarà in "Standby".

Conclusione

In questo articolo, abbiamo seguito la procedura passo passo per abilitare Alta disponibilità su Resource Manager. Ogni volta che il Gestore risorse attivo si disattiva, il Gestore risorse in standby diventerà Attivo in modo che la produzione non subisca un'interruzione.