Node Labels in Hadoop

Question

Suchen Sie einfach nach einem Verständnis, wie Knotenbezeichnungen in Bezug auf HDFS funktionieren. Ich verstehe die Verarbeitung unter Verwendung von Garn mit einem begrenzten Satz von Knoten, die unter Knotenbeschriftungen definiert sind. Wie wird es auf HDFS-Ebene verwaltet? Angenommen, ich habe 40 Knoten und weise 20 Knoten für eine Knotenbezeichnung zu.

1. Werden Daten zur Verarbeitung von einem Knoten zu einem anderen Knoten kopiert?
2. Befinden sich Daten nur in diesen Knoten unter Knotenbeschriftungen.

Versuchen Sie, Materialien zu dem oben genannten Thema zu erhalten.

Answer 1

Nun, die Knotenbeschriftungen sind nur für die YARN-Verarbeitung. Eine Datenverarbeitung kann die Daten lokal verfügbar haben oder nicht. In diesem Fall werden Daten vom anderen Knoten gestreamt. Die Bearbeitungszeit wird beeinflusst. Basierend auf dem Anwendungsfall kann die Kennzeichnung nützlich sein oder auch nicht.