Wyszukiwanie w witrynie

Jak skonfigurować wysoką dostępność Menedżera zasobów — część 6

YARN to warstwa przetwarzająca Hadoopa, która składa się z głównej (menedżera zasobów) i podrzędnej (Node Manager) usługi przetwarzania danych. Menedżer zasobów (RM) to krytyczny komponent odpowiedzialny za alokację zasobów i zarządzanie nimi wśród wszystkich zadań uruchomionych w klastrze Hadoop.

Zawsze zaleca się i jest najlepszą praktyką włączenie funkcji Wysoka dostępność klastra (HA) w usługach krytycznych, takich jak Namenode i Menedżer zasobów.

Wymagania

  • Najlepsze praktyki dotyczące wdrażania serwera Hadoop w CentOS/RHEL 7 – część 1
  • Konfigurowanie wymagań wstępnych Hadoop i zwiększanie zabezpieczeń — część 2
  • Jak zainstalować i skonfigurować menedżera Cloudera na CentOS/RHEL 7 – część 3
  • Jak zainstalować CDH i skonfigurować rozmieszczenie usług w CentOS/RHEL 7 – część 4
  • Jak skonfigurować wysoką dostępność dla Namenode – część 5

W tym artykule zobaczymy, jak włączyć Wysoką dostępność w Menedżerze zasobów.

Włączanie wysokiej dostępności w Menedżerze zasobów

1. Przejdź do Cloudera Manager pod następującymi adresami i przejdź do YARN –> Actions –> Włącz wysoką dostępność.

http://13.233.129.39:7180/cmf/home

2. Wybierz serwer, na którym będziesz mieć drugiego Menedżera zasobów. Zwykle będziemy mieć drugi serwer główny do wdrożenia wysokiej dostępności. Tutaj wybieramy master2, aby włączyć HA.

3. Po wybraniu master2 kliknij „Kontynuuj”, aby kontynuować.

4. Rozpocznie się proces włączania HA. Możesz wyświetlić operacje w tle, klikając poszczególne kroki.

5. Po zakończeniu wszystkich procesów otrzymasz status „Zakończono”. Kliknij „Zakończ”.

6. Sprawdź wysoką dostępność Resource Managera, przeglądając instancje Yarn w Cloudera Manager –> YARN –> Instancje.

Możesz zobaczyć dwa Menedżery zasobów, jeden będzie w stanie „Aktywny”, drugi będzie w stanie „Wstrzymanie”.

Wniosek

W tym artykule omówiliśmy krok po kroku procedurę włączania Wysokiej dostępności w Menedżerze zasobów. Za każdym razem, gdy Aktywny menedżer zasobów ulegnie awarii, Wstrzymany menedżer zasobów stanie się Aktywny, dzięki czemu produkcja nie będzie miała przestojów.