Wie wird auf die in hdfs auf Hadoop gespeicherten Abhängigkeiten (jars) verwiesen?

Auf Hadoop: Ich möchte ein Jar ausführen, das viele Abhängigkeiten (JARS) in hdfs gespeichert hat (ich möchte sie nicht in das lokale Dateisystem einfügen).Wie wird auf die in hdfs auf Hadoop gespeicherten Abhängigkeiten (jars) verwiesen?

Wie mache ich das?

Quelle

2017-03-25 Mosab Shaheen

-1

Sie können sie auf dem Klassenpfad des Kunden setzen (Edge) Knoten heißt die Maschine, von wo aus Sie den Code (Haupt jar) laufen

Update: Sie können die -libjars Option erkunden.

Sie können auch diesen sehr guten Blog überprüfen. http://grepalex.com/2013/02/25/hadoop-libjars/

Quelle

2017-03-26 03:48:52 SurjanSRawat

Können Sie ein Beispiel geben. Auch Abhängigkeiten (jars), die in hdfs gespeichert sind, möchte ich nicht auf jedem Knoten im lokalen Dateisystem ablegen. –

Ich schlage vor, die Option -libjars einmal zu erkunden. – SurjanSRawat

Ich denke, Libjars für die lokalen Bibliotheken nicht für diejenigen in hdfs –

Wie wird auf die in hdfs auf Hadoop gespeicherten Abhängigkeiten (jars) verwiesen?

Antwort

Verwandte Themen