XML-Dateien mit Google Cloud-Datenfluss erzeugen

Question

Ich arbeite an einem Projekt, um XML-Dateien zu generieren, die Daten enthalten, die in Google Maps angezeigt werden.

Die Tabellen sind in der Cloud BigQuery gespeichert. Wir erstellen eigene Abfragen für diese Tabellen.

Wie kann ich das Starten von Abfragen auf BigQuery über Google Cloud DataFlow automatisieren, in dem Wissen, dass wir eine Parametertabelle haben werden?

Ist es möglich, eine XML-Datei mit Google Cloud DataFlow zu generieren?

Answer 1

Wenn Sie nur versuchen, Möglichkeiten zu identifizieren, für in Dataflow/Beam mit XML interagieren, würde dies helfen:

https://beam.apache.org/documentation/sdks/javadoc/2.1.0/org/apache/beam/sdk/io/xml/XmlIO.html

mit BigQuery für die Interaktion:

1. Bewertung der Strahl Programmieranleitung: https://beam.apache.org/documentation/programming-guide/

2. Für die Interaktion mit BigQuery, Besuche die javadoc: https://beam.apache.org/documentation/sdks/javadoc/2.1.0/