Apache Beam Programmausführung ohne Maven

Question

Ich möchte ein einfaches Beispiel Beam-Programm mit Apache Spark Runner ausführen. 1) Ich war in der Lage, das Programm in meinem lokalen erfolgreich zu kompilieren. 2) Ich möchte die JAR-Datei in QA-Box schieben, wo Maven nicht installiert ist. 3) Ich sehe das Beispiel mit Maven-Befehl, der das Beispielprogramm kompiliert und ausführt. 4) Können Sie mir bitte die Schritte sagen, um den Code auszuführen, ohne Maven zu installieren. 5) spark-submit-Befehl läuft gut. 6) Haben Sie mir alle abhängigen JAR-Dateien nacheinander in /opt/mapr/spark/spark-2.1.0/jars Verzeichnis setzen wollen das Programm

Dank auszuführen.

Answer 1

Sie können dies tun, indem Sie die Anweisungen in Beam Spark Runner documentation befolgen.

Diese Anweisungen zeigen, wie Sie Ihre Bewerbung einreichen, indem Sie die folgenden Aktionen ausführen:

1. Verpackung Ihrer Anwendung, mit Abhängigkeiten, als uber Glas.
2. Senden Sie Ihre verpackte Anwendung mit spark-submit.