Ich verstehe, dass Apache Apex auf Hadoop und YARN läuft. Verwendet es HDFS für Persistenz und Replikation, um Datenverlust zu vermeiden? oder hat es seine eigene?Verlässt sich Apache Apex auf HDFS oder besitzt es ein eigenes Dateisystem?
2
A
Antwort
2
Apache Apex hat kein eigenes Dateisystem. Streaming-Anwendungen, die mit Apex geschrieben wurden, verwenden standardmäßig HDFS für die Überprüfung, Persistenz und das Speichern anwendungsspezifischer Daten.
3
Apache Apex verwendet den Prüfpunkt des Operatorstatus für Fehlertoleranz. Apex verwendet HDFS, um diese Prüfpunkte für die Wiederherstellung zu schreiben. Der Speicher für das Fixpointing ist jedoch konfigurierbar. Apex hat auch eine Implementierung zu checkpoint to Apache Geode. Apex verwendet HDFS auch zum Hochladen von Artefakten, z. B. eines Anwendungspakets, das das Anwendungs-JAR, seine Abhängigkeiten und Konfigurationen usw. enthält, die zum Starten der Anwendung benötigt werden.
Verwandte Themen
- 1. Speichert Apache Kafka die Nachrichten intern in HDFS oder einem anderen Dateisystem
- 2. Apache Apex minimale Entwicklungsumgebung
- 3. Controlling GARN Speichereinstellungen innerhalb Apache Apex Speichermodell
- 4. DataTorrent/Apache Apex mit sbt
- 5. Warum verlässt sich DropDownList.SelectedValue auf viewstate?
- 6. Was ist ein virtuelles Dateisystem oder ein Dateisystem im Benutzerbereich?
- 7. Apache Apex - kryo ArrayList Ausnahme
- 8. apache nifi, hdfs parkett format
- 9. Ausnahmen in HDFS-Dateisystem in Java Zugriff auf
- 10. Was ist der Betreiberlebenszyklus in Apache Apex?
- 11. Wie weiß Apache Spark über HDFS-Datenknoten?
- 12. Wie Apache Apex-Anwendung neu starten?
- 13. Out-of-Order-Verarbeitung in Apache Apex
- 14. FileInputStream für ein generisches Dateisystem
- 15. Bibliothek oder eigenes Framework?
- 16. Verteiltes Dateisystem für .NET
- 17. Auf welche Teile von Windows verlässt sich Qt?
- 18. wie hdfs Dateinamen mit Apache Bohrern bekommen
- 19. Der Aufruf Thread kann Zugriff auf dieses Objekt nicht, weil ein anderer Thread es besitzt, WPF
- 20. Hadoop: map/reduce von HDFS
- 21. Warum Behälter Docker verlässt sofort
- 22. Sollten wir ein PHP-Framework verwenden oder unser eigenes erstellen?
- 23. Wie funktioniert Spark Partition (ing) auf Dateien in HDFS?
- 24. Datei aus HDFS übertragen
- 25. Der aufrufende Thread kann nicht auf dieses Objekt zugreifen, weil ein anderer Thread es besitzt
- 26. Der aufrufende Thread kann nicht auf dieses Objekt zugreifen, weil ein anderer Thread es besitzt
- 27. Wie bekomme ich ApplicationID aus der Apache Apex-Anwendung?
- 28. Kann Javascript auf ein Dateisystem zugreifen?
- 29. Subclassing Tkinter ein eigenes Widget
- 30. Gibt es ein Netzwerk-Dateisystem für Mainframes (System Z)?