Lauf Funke auf AWS EMR, indem Anmeldeinformationen

Question

Ich bin neu in EMR und versuchten Funkenjob als Schritt mit so etwas wie command-runner.jar spark-submit --deploy-mode cluster --class com.xx.xx.className s3n://mybuckets/spark-jobs.jar
jedoch zu starten, der Funken Job muss Anmeldeinformationen als Umgebungsvariablen, meine Frage ist, was der beste Weg ist, um die Anmeldeinformationen als Umgebungsvariablen an die Spark-Jobs zu übergeben.
Danke!

Answer 1

Werfen Sie einen Blick hier: AWS EMR 4.0 - How can I add a custom JAR step to run shell commands und hier: http://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-hadoop-script.html versuchen Schritt ähnliche (Argumente) ausgeführt wird:/usr/bin/Funken einreichen --deploy-Modus Cluster --Klasse