Ist es möglich, die Funkeninstallation oder die Spark-Version über Java-Code zu überprüfen?Wie kann man herausfinden, ob Spark installiert ist oder nicht Java-Code verwendet?
Bitte geben Sie irgendwelche Vorschläge.
ich bin nicht sicher, aber das könnte funktionieren: classOf[SparkContext].getPackage.getImplementationVersion für weitere Informationen überprüfen programmatic-way-to-tell-Spark-version
Hoffe, dass es
Vielen Dank für Ihre Antwort. Ist es möglich, Core-Java-Code ohne Verwendung von Spark-Code zu überprüfen? –
TL hilft; DR Es ist eine sehr schwierige Programmieraufgabe, wenn möglich wäre, überhaupt .
Sie müssten find -ähnliche Java-Anwendung zu suchen, wie z.
Sie könnten auch nach einigen Umgebungsvariablen wie SPARK_HOME suchen, aber da dies nicht erforderlich ist, um Spark auch effektiv zu verwenden, würde ich nicht darauf zählen.
Um nach einer API zu suchen, [prüfen, ob ein Paket vorhanden ist oder nicht] (http://stackoverflow.com/q/2547867/4391450) – AxelH