Ich folge dem Beispiel auf: https://cloud.google.com/hadoop/examples/bigquery-connector-spark-exampleFunktioniert der BigQuery- und Hadoop-Connector für föderierte Tabellen?
Ich habe eine föderierte Tabelle auf BigQuery. Wäre es möglich, Daten daraus zu ziehen?
Der BigQuery-Konnektor verfügt derzeit nicht über eine spezielle Logik zum Behandeln von föderierten Tabellen. Daher wird er nicht ordnungsgemäß funktionieren, da er versuchen würde, zu einem anderen GCS-Speicherort zu "exportieren". Ich habe eine GitHub issue eingereicht, um diese Funktion zu verfolgen; Wenn die föderierten Daten tatsächlich bereits in GCS vorhanden sind, sollten Sie dennoch in der Lage sein, direkt auf sie als normales FileInputFormat (oder sc.textFile) zuzugreifen. Dadurch verlieren Sie nur die Vorteile von Schema/Metadaten beim Durchlaufen von BigQuery.