0
Ich möchte mein mapreduce-Programm auf einem Hadoop-Cluster ausführen, aber ich habe ein Problem.Hadoop-Cluster-Konfiguration Ressourcenmanagement
Wenn ich das Programm ausführen, scheint es, dass nur Master-Ressource verwendet und Sklaven nicht handelt. Die CPU und der RAM des Masters wurden verwendet, aber keine Slaves.
Ich habe einen Master und 7 Slaves.
Master spec: 2 CPU-Kern und 4 GB RAM
Slaves SPEC: 2 CPU-Kern und 4 GB RAM für jeden.
Wenn ich Programm-Master-CPU-Nutzung ausführen ist ca. 70% und RAM-Nutzung ca. 1,5 GB. aber die Ressourcen von Slaves ändern sich nicht.
Bitte helfen Sie mir. Es ist für mich sehr wichtig. Wie sollte ich meinen Cluster so konfigurieren, dass die Ressource optimiert verwendet wird?
Vielen Dank im Voraus.
zunächst prüfen, ob alle Knoten verfügbar sind, alle Dienste ausgeführt werden und kommunizieren können. dann versuchen Sie, WordCount – AdamSkywalker
laufen alle meine Knoten laufen und alles ist in Ordnung. Ich starte mein Programm und mache einen Screenshot von meinem YARN UI Panel. Sie können die Screenshots von hier sehen https://i.imgsafe.org/e16cfb5fab.png https://i.imgsafe.org/e16ce67c62.png https://i.imgsafe.org/e16ce42104.png https://i.imgsafe.org/e16c239a26.png https://i.imgsafe.org/e16ca934c0.png – Mastercode
aber Sklaven ruhen und keine Aktivität! gibt es Cluster-Status Screenshot https://i.imgsafe.org/e183b0d6d5.png https://i.imgsafe.org/e184055a51.png https://i.imgsafe.org/e18425ccc0.png https: //i.imgsafe.org/e1843dd10c.png https://i.imgsafe.org/e184306177.png https://i.imgsafe.org/e18433975b.png https://i.imgsafe.org/ e1844b403c.png https://i.imgsafe.org/e184465610.png danke im voraus. – Mastercode