Recherche de site Web

Comment configurer la haute disponibilité pour Resource Manager – Partie 6

YARN est la Couche de traitement de Hadoop, qui se compose du Maître (Resource Manager) et de l'Esclave. (Node Manager) pour traiter les données. Resource Manager (RM) est le composant essentiel responsable de l'allocation et de la gestion des ressources parmi toutes les tâches exécutées dans le Hadoop Cluster.

Il est toujours recommandé et constitue une bonne pratique d'activer la haute disponibilité (HA) du cluster sur les services critiques tels que Namenode et Resource Manager.

Exigences

  • Meilleures pratiques pour le déploiement du serveur Hadoop sur CentOS/RHEL 7 – Partie 1
  • Configuration des prérequis Hadoop et renforcement de la sécurité – Partie 2
  • Comment installer et configurer Cloudera Manager sur CentOS/RHEL 7 – Partie 3
  • Comment installer CDH et configurer les emplacements de services sur CentOS/RHEL 7 – Partie 4
  • Comment configurer la haute disponibilité pour Namenode – Partie 5

Dans cet article, nous verrons les étapes pour activer la Haute disponibilité sur Resource Manager.

Activation de la haute disponibilité sur Resource Manager

1. Accédez à Cloudera Manager aux adresses suivantes et accédez à YARN –> Actions –> Activez la haute disponibilité.

http://13.233.129.39:7180/cmf/home

2. Sélectionnez un serveur sur lequel vous allez avoir un deuxième Resource Manager. Habituellement, nous aurons un deuxième serveur maître pour déployer la haute disponibilité. Ici, nous sélectionnons master2 pour activer HA.

3. Une fois sélectionné le master2, cliquez sur « Continuer » pour continuer.

4. Le processus d'activation HA sera lancé. Vous pouvez afficher les opérations en arrière-plan en cliquant sur chaque étape.

5. Une fois tous les processus terminés, vous obtiendrez le statut « Terminé ». Cliquez sur « Terminer ».

6. Vérifiez la haute disponibilité de Resource Manager en affichant les instances Yarn sur Cloudera Manager –> YARN –> Instances.

Vous pouvez voir deux Resource Manager, l'un sera dans l'état « Actif », un autre sera en « Veille ».

Conclusion

Dans cet article, nous avons parcouru la procédure étape par étape pour activer la Haute disponibilité sur Resource Manager. Chaque fois que le Gestionnaire de ressources actif tombe en panne, le Gestionnaire de ressources de secours deviendra Actif afin que la production ne connaisse pas de panne.