2015-08-30 7 views
11

Ich zog die neueste Quelle aus dem Spark-Repository und baute lokal. Es funktioniert gut von einer interaktiven Shell wie spark-shell oder spark-sql.Wie verbindet man Zeppelin mit Spark 1.5 aus den Quellen?

Jetzt möchte ich Zeppelin an meinen Spark 1.5, nach this install manual anschließen. Ich habe den benutzerdefinierten Spark-Build für das lokale Maven-Repository veröffentlicht und die benutzerdefinierte Spark-Version im Zeppelin-Build-Befehl festgelegt. Der Build-Prozess erfolgreich abgeschlossen, aber wenn ich versuche, grundlegenden Dinge wie sc innen Notebook zu laufen, es wirft:

akka.ConfigurationException: Akka JAR-Version [2.3.11] nicht die Config-Version zur Verfügung gestellt entsprechen [2.3.4 ]

Version 2.3.4 ist in pom.xml und spark/pom.xml, setzen aber einfach zu ändern, sie wird mir ein Build nicht einmal erhalten lassen.

Wenn ich Zeppelin mit dem Standard -Dspark.vesion=1.4.1 umbauen, funktioniert alles.

+1

Hallo, ich sehe, Sie sind neu in StackOverflow. Wenn Sie der Meinung sind, dass eine Antwort das Problem gelöst hat, markieren Sie es als "akzeptiert", indem Sie auf das grüne Häkchen klicken. Dies hilft, den Fokus auf ältere SO zu richten, die immer noch keine Antworten haben. – bzz

Antwort

8

-Update 2016-01

Spark-1.6-Unterstützung landed to master und ist unter -Pspark-1.6 Profil zur Verfügung.


-Update 2015-09

Spark-1.5-Unterstützung landed to master und ist unter -Pspark-1.5 Profil zur Verfügung.


Arbeiten an Spark-1.5 in Apache Zeppelin unterstützt (Inkubieren) wurde im Rahmen dieser PR apache/incubator-zeppelin#269 getan, die bald verleihen zu meistern.

Für jetzt, Gebäude von Spark_1.5 Zweig mit -Pspark-1.5 sollte den Trick tun.

Verwandte Themen