Apache Flink stellt REST API bereit, um seine Jobs zu senden. Ich versuche, diese REST-API von meinem lokalen Rechner aus aufzurufen, bekomme aber java.net.UnknownHostException
. Bisher habe ich meinen Job erfolgreich über SSH ausgeführt, muss aber einen Job über die REST API ausführen, damit ich Jobs direkt aus meiner Anwendung/meinem Code ausführen kann.Flink-Job auf AWS EMR über Flink-REST-API ausführen
1
A
Antwort
0
Dies ist über Flink REST API möglich. Das Problem in meinem Fall war, dass mein EMR IP nicht öffentlich war.
Verwandte Themen
- 1. Presto auf AWS EMR: Zugriff über Farbton
- 2. Benutzerdefinierte log4j.properties auf AWS EMR
- 3. Spark UI auf AWS EMR
- 4. Zugriff auf JDBC-Treiber über Funken mit AWS EMR-Instanz
- 5. Ausführen von Java Spark-Programm auf AWS EMR
- 6. Sentry in AWS EMR
- 7. AWS EMR-Dateierstellung auf Cluster funktioniert nicht
- 8. AWS EMR Spark 1.0
- 9. AWS EMR-Garnbehälter
- 10. AWS EMR Spark- Cloudwatch
- 11. Speicherplatzproblem in AWS EMR-Cluster
- 12. Lauf Funke auf AWS EMR, indem Anmeldeinformationen
- 13. Wie starte ich Garn auf AWS EMR
- 14. AWS EMR Spark Schrittargus Bug
- 15. R-Skript über AWS über API ausführen
- 16. Spark AWS EMR Checkpoint Location
- 17. AWS EMR PySpark Verbindung mysql
- 18. HiveActivity auf einem vorhandenen Cluster EMR Ausführen (mit workergroup) Fehler
- 19. Terraform für AWS EMR Autoskalierung
- 20. EMR Funke Job von aws-cli
- 21. Ausführen eines Skripts auf einem AWS-Server
- 22. So starten Sie Schwein mit-t ColumnMapKeyPrune auf AWS Emr
- 23. AWS: serverseitiges Skript über Load Balancer ausführen
- 24. AWS EMR Schritt fehlgeschlagen, da Jobs fehlgeschlagen
- 25. RStudio auf Amazon EMR-Cluster
- 26. Ausführen eines Python-Skripts über AWS-Datenpipelines
- 27. AWS 'EMR vs EC2 Preise Verwirrung
- 28. AWS DataPipeline EMR-Cluster mit Funke
- 29. AWS-EMR: Wo ist die Protokolldatei?
- 30. AWS EMR Kerberisierung des Clusters hadoop.security.AccessControlException
Können Sie die Stack-Trace mit uns teilen? –
java.net.UnknownHostException: http: //ip-333-33-33-33.ec2.internal \t bei java.net.InetAddress.getAllByName0 (InetAddress.java:1280) \t bei java.net.InetAddress. getAllByName (InetAddress.java:1192) \t bei java.net.InetAddress.getAllByName (InetAddress.java:1126) \t bei java.net.InetAddress.getByName (InetAddress.java:1076) \t bei org.apache.flink .runtime.rpc.akka.AkkaRpcServiceUtils.getRpcUrl (AkkaRpcServiceUtils.java:173) \t bei org.apache.flink.runtime.rpc.akka.AkkaRpcServiceUtils.getRpcUrl (AkkaRpcServiceUtils.java:138) \t ... –
Siehe http : //docs.aws .amazon.com/emr/neuste/ManagementGuide/emr-connect-master-node.html –