Hadoop-Administration

Question

Ich habe eine Hadoop 1.2.x-Version, Cluster mit zwei Knoten eingerichtet. Erster Knoten (NameNode, Jobtracker) und zweiter Knoten (Secondary NameNode, Datanode, TaskTracker).

Wie setze ich die Karte und reduzieren Slots auf 4 und 2 für jeden Knoten und wie überprüfe ich das gleiche von der Kommandozeile aus.

Answer 1

Um die slots pro Tasktracker-Knoten festzulegen, begrenzen Sie die maximale Anzahl der Aufgaben, die ein Knoten gleichzeitig ausführen kann.

Fügen Sie diese Eigenschaften zu mapred-site.xml

<property> 
    <name>mapred.tasktracker.map.tasks.maximum</name> 
    <value>4</value> 
</property> 
<property> 
    <name>mapred.tasktracker.reduce.tasks.maximum</name> 
    <value>2</value> 
</property> 

Sie die von jobtracker

hadoop jobtracker -dumpConfiguration