Wir haben eine Anforderung, wo wir ORC
Dateien appedend müssen. Ich habe versucht, es zu googeln, aber kein Ergebnis. Auch org.apache.hadoop.hive.ql.io.orc.WriterImpl
von ORC
haben nicht die Append-API. Gibt es eh die ORC-Dateien anhängen? (Insbesondere mit JAVA)Wie Sie ORC-Datei anhängen
5
A
Antwort
4
ORC Datendateien subdivised in unabhängigen Streifen; Jeder Streifen wird in einem einzigen atomaren Schritt erzeugt. Details siehe the official documentation.
Ich glaube nicht, dass Sie direkt an eine vorhandene Datei anhängen können. Das würde bedeuten, dass ein korrupter Streifen (daher eine beschädigte Datei) im Falle eines Auftragsabsturzes während des Schreibens zurückbleibt.
Aber Sie können
- erstellen Sie eine neue ORC-Datendatei pro Minderer
- dann „verketten“ diese Daten (die 1..N Streifen je auf tatsächliche Datenvolumen vs.
orc.stripe.size
Eigenschaft enthalten wird) Dateien - und vorhandene Datei (en) - mit Hive V0.14 and above
Verwandte Themen
- 1. Wie anhängen Sie Text in Codemirror
- 2. Wie rekursiv Zellen anhängen?
- 3. Wie Sie den Wert in der Tabelle anhängen
- 4. Wie Sie FileUtils anhängen, anstatt die Textdatei zu überschreiben
- 5. Wie Sie bedingte Kompilierungssymbole in Projekteigenschaften mit MSBuild anhängen?
- 6. Wie Sie Child (Element) mehrmals anhängen. (Das gleiche Element)
- 7. Wie Sie eine Sitzung an eine URL in webconfig anhängen
- 8. jQuery: wie ich anhängen $ (this)
- 9. Wie Kind vor anhängen. Prototyp
- 10. Innerhtml anhängen anstatt sie zu ersetzen
- 11. Python - Wie Daten anhängen statt überschreiben?
- 12. Wie auf den Wert in Javascript ‚#‘ anhängen
- 13. PHP Textarea anhängen
- 14. Quellen intellij neu anhängen?
- 15. Mysql Spaltenwert anhängen
- 16. Javascript Token ersetzen/anhängen
- 17. TextView an RecyclerView anhängen
- 18. HTML-E-Mail mit Inline-Anhängen und Nicht-Inline-Anhängen
- 19. C an char anhängen *
- 20. POSIX mit Newline anhängen?
- 21. Wie an dom in React anhängen?
- 22. Problem in Eclipse anhängen
- 23. Python sys.path - anhängen PYTHONPATH
- 24. Quelle an VisualVM anhängen?
- 25. Entitäten an Datenkontexte anhängen
- 26. anhängen an Funktion lua
- 27. Quellcode an Jprofiler anhängen
- 28. Javamail mehrere Dateien anhängen
- 29. anhängen Daten Richtlinien Element
- 30. Pandas: neue Zwischensummenzeile anhängen