Ich habe versucht, einen Funken Cluster mit Garn zu machen. Muss ich Garn an allen Knoten anbringen? Ich weiß, Garn wird alle brauchen Glas und MR, aber um sie zu nehmen, nehme ich an, dass Arbeiterknoten Garnpaket benötigen. Master-Knoten sollte mit HDFS und Glas sowie Garn installiert werden.Vorinstallation für Funkengarn Cluster
GARN erfordert zwei Prozesse
Resource Manager ist der Master, der delegiert Aufgaben. Node Manager ist der Slave, der an der gegebenen Arbeit arbeitet. Sie müssen Resource Manager auf einem Computer (Server in Produktionsqualität) und Node Manager auf allen Slave-Computern (Standardhardware) installieren.
HDFS erfordert die folgenden Prozesse
NameNode und Secondary NameNode werden in zwei getrennten Maschinen (Produktions Grade-Server) und DataNode installiert sein, auf alle Slave-Maschinen (Standard-Hardware).
In der Regel werden DataNode und NodeManager zusammen auf allen Slave-Knoten installiert.
Nicht sicher, was Sie genau machen wollen.
Da hadoop 2.0 Garn ein wesentlicher Bestandteil von hadoop ist. Also, wenn Sie Hadoop installieren, wird Garn automatisch installiert.
Wenn Sie die bereitgestellten Skripts zum Starten von hadoop verwenden, starten sie den Hadoop-Stack. Dann können Sie das mitgelieferte Skript verwenden, um das Garn zu starten.
Dann installieren Sie Spark, und zeigen Sie es Bibliotheken von Hadoop-Installation und Konfiguration zu verwenden.
Es ist nicht nötig, sich mit der manuellen Installation von Garn zu befassen.