Wie man den Funkenausführungsstatus im Garn-Cluster-Modus auf AWS sieht

Ich führe eine Funken-Anwendung im Garn-Cluster-Modus auf AWS.Wie man den Funkenausführungsstatus im Garn-Cluster-Modus auf AWS sieht

Wie Sie sehen ich keinen laufenden Status von Web erhalten.

Von der Konsole bekomme ich nur 16/05/26 10:12:01 INFO yarn.Client: Application report for application_1464256533172_0002 (state: RUNNING), die nur anzeigt, dass es lebt.

+++

Hier ist eine Momentaufnahme in Garn-Client-Modus unter den gleichen Bedingungen.

Es scheint in Ordnung. Es wurde mindestens eine Fortschrittsleiste angezeigt. Aber auch nach dem Ende der Ausführung hat es sich nie wieder geändert und zeigt immer noch 0/368 Aufgaben.

Inzwischen kann ich sagen, nur unter Garn-Client-Modus-Status läuft gezeigt werden kann, aber nie aktualisiert werden ... So wie eine aktualisierbare Status im Modus Garn-Cluster zeigen ....

Quelle

2016-05-26 LTzycLT

Wie haben Sie die Bewerbung eingereicht? –

@Koffee 'ssh user @ host spark-submit --master Garn-Cluster main.py'. Ich möchte Funke-Anwendung von ssh im nicht interaktiven Modus ausführen. – LTzycLT

Log der Anwendung mit: Garn Logs-ApplicationId ist alles in Ordnung? Könnten Sie auch Ihren Code einfügen? –

I Sie können keine Jobs sehen, die in Ihren Executoren ausgeführt werden. Überprüfen Sie Ihren Code, um festzustellen, ob Sie in Ihrem Spark-Job eine Aktion für RDD ausgeführt haben.

Quelle

2016-05-26 11:21:23 Vaibhavrtk

Ich bin sicher, dass einige Jobs von den Protokollen in der Konsole ausgeführt werden. – LTzycLT

Das Bild mit den hier eingefügten Executoren zeigt 0 komplette Aufgaben, was bedeutet, dass kein Job ausgeführt wurde. Können Sie Ihren Code einfügen, damit wir sehen können, was passiert? – Vaibhavrtk

Wie man den Funkenausführungsstatus im Garn-Cluster-Modus auf AWS sieht

Antwort

Verwandte Themen