Ich weiß, dass Google Dataflow nur eine Datei in Google Cloud Storage, BigQuery, Avro-Dateien oder Pub/Sub standardmäßig als E/A für einen Dataflow unterstützt.Gibt es eine MongoDB-Quelle/Senke von Google Dataflow?
Aber wie es eine API for Custom Source and Sink hat Ich frage mich, gibt es einige Pipeline-I/O-Implementierung für MongoDB?
Jetzt muss ich entweder meine Daten nach BigQuery migrieren oder die gesamte Pipeline-I/O-Implementierung schreiben, bevor ich überhaupt wissen kann, ob Google Dataflow eine brauchbare Lösung für meine aktuellen Probleme ist.
Ich habe versucht zu googeln und Blick auf die current SDK issues und habe nichts zu sehen. Ich begann mich sogar zu fragen, ob ich etwas sehr Einfaches aus dem Google Dataflow-Konzept und den Dokumenten verpasst habe, was diese ursprüngliche Idee, MongoDB als Datenquelle zu verwenden, völlig ungültig macht.
Ich habe meine Antwort aktualisiert. Ein MongoDB-Connector ist jetzt verfügbar. – jkff
@jkff gut zu wissen, danke für das Update! –