Augstas pieejamības iestatīšana resursu pārvaldniekam - 6. daļa

YARN ir Hadoop apstrādes slānis, kas sastāv no galvenajiem (resursu pārvaldnieks) un vergu (mezglu pārvaldnieks) pakalpojumiem, lai apstrādātu datus. Resursu pārvaldnieks (RM) ir kritiskā sastāvdaļa, kas ir atbildīga par resursu piešķiršanu un pārvaldību starp visiem Hadoop klastera darbiem.

Vienmēr ieteicams un labākās prakses gadījumā iespējojiet kopas Augsta pieejamība (HA) kritiskos pakalpojumos, piemēram, Namenode un Resource Manager.

  • Hadoop servera izvietošanas paraugprakse CentOS/RHEL 7 - 1. daļa
  • Hadoop priekšnoteikumu un drošības sacietēšanas iestatīšana - 2. daļa
  • Kā instalēt un konfigurēt Cloudera Manager vietnē CentOS/RHEL 7 - 3. daļa
  • Kā instalēt CDH un konfigurēt pakalpojumu izvietojumus CentOS/RHEL 7 - 4. daļa
  • Kā iestatīt Namenode augstu pieejamību - 5. daļa

Šajā rakstā mēs redzēsim darbības, kā iespējot resursu pārvaldniekā augstu pieejamību.

Augstas pieejamības iespējošana resursu pārvaldniekā

1. Dodieties uz Cloudera Manager šādās adresēs un dodieties uz Dzija -> Darbības -> Iespējot augstu pieejamību.

http://13.233.129.39:7180/cmf/home

2. Atlasiet serveri, kurā jums būs otrais resursu pārvaldnieks. Parasti mums būs otrais galvenais serveris, lai izvietotu augstu pieejamību. Šeit HA atlasīšanai tiek izvēlēts master2.

3. Kad esat izvēlējies galveno2, noklikšķiniet uz Turpināt, lai turpinātu.

4. Tiks uzsākta HA procesa iespējošana. Fona darbības var apskatīt, noklikšķinot uz katras darbības.

5. Kad visi procesi būs pabeigti, jūs saņemsiet statusu Pabeigts. Noklikšķiniet uz Pabeigt.

6. Pārbaudiet resursu pārvaldnieka augstu pieejamību, apskatot dzijas gadījumus vietnē Cloudera Manager -> YARN -> Instances.

Varat redzēt divus resursu pārvaldniekus: viens būs stāvoklī “Aktīvs”, cits būs “Gaidīšanas režīmā”.

Šajā rakstā mēs esam pārbaudījuši soli pa solim procedūru, lai resursu pārvaldniekā iespējotu augstu pieejamību. Ikreiz, kad aktīvo resursu pārvaldnieks pazeminās, gaidstāves resursu pārvaldnieks kļūs aktīvs, lai ražošana netiktu pārtraukta.