Website-Suche

Einrichten der Hochverfügbarkeit für Resource Manager – Teil 6

YARN ist die Verarbeitungsschicht von Hadoop, die aus den Master- (Resource Manager) und Slave-Diensten (Node Manager) besteht, um die Daten zu verarbeiten. Resource Manager (RM) ist die kritische Komponente, die für die Ressourcenzuweisung und -verwaltung aller Aufträge verantwortlich ist, die in Hadoop Cluster ausgeführt werden.

Es wird immer empfohlen und empfohlen, die Hochverfügbarkeit (HA) des Clusters für kritische Dienste wie Namenode und Resource Manager zu aktivieren.

Anforderungen

  • Best Practices für die Bereitstellung von Hadoop Server unter CentOS/RHEL 7 – Teil 1
  • Einrichten von Hadoop-Voraussetzungen und Härtung der Sicherheit – Teil 2
  • So installieren und konfigurieren Sie den Cloudera Manager unter CentOS/RHEL 7 – Teil 3
  • So installieren Sie CDH und konfigurieren Service Placements unter CentOS/RHEL 7 – Teil 4
  • So richtest du Hochverfügbarkeit für Namenode ein – Teil 5

In diesem Artikel sehen wir die Schritte zum Aktivieren der Hochverfügbarkeit in Resource Manager.

Aktivieren von Hochverfügbarkeit in Resource Manager

1. Rufen Sie Cloudera Manager unter den folgenden Adressen auf und navigieren Sie zu YARN –> Actions –> Enable High Availability.

http://13.233.129.39:7180/cmf/home

2. Wählen Sie einen Server aus, auf dem Sie einen zweiten Resource Manager haben möchten. In der Regel haben wir einen zweiten Master-Server für die Bereitstellung von Hochverfügbarkeit. Hier wählen wir master2 aus, um HA zu aktivieren.

3. Nachdem Sie den Master2 ausgewählt haben, klicken Sie auf "Weiter", um fortzufahren.

4. Der HA-Prozess wird aktiviert. Sie können die Hintergrundvorgänge anzeigen, indem Sie auf die einzelnen Schritte klicken.

5. Sobald alle Vorgänge abgeschlossen sind, erhalten Sie den Status "Fertig". Klicken Sie auf "Fertig".

6. Überprüfen Sie die Hochverfügbarkeit von Resource Manager, indem Sie die Yarn-Instances unter Cloudera Manager –> YARN –> Instances anzeigen.

Sie können zwei Resource Manager sehen, von denen sich einer im Status "Aktiv" befindet, der andere sich im "Standby".

Schlussfolgerung

In diesem Artikel haben wir das Schritt-für-Schritt-Verfahren zum Aktivieren der Hochverfügbarkeit in Resource Manager durchlaufen. Wenn der aktive Ressourcen-Manager ausfällt, wird der Standby-Ressourcen-Manager aktiv, sodass es in der Produktion nicht zu einem Ausfall kommt.

Verwandte Artikel: