Ist es möglich, Kommentare in der Schemadefinition einer BigQuery-Tabelle über die API anzugeben?Hinzufügen einer Spaltenbeschreibung zur BigQuery-Schemadefinition
Ich benutze das folgende Schema, wenn eine BigQuery Tabelle über den Stecker
[{"name" : "event_id", "type" : "integer"},{ "name" : "categorization" , "type" : "string" }]
Hadoop Schaffung Und ich mag so etwas wie
[{"name" : "event_id", "type" : "integer", "description" : "The event identifier"},{ "name" : "categorization" , "type" : "string" }]
EDIT: Ich habe das gerade versucht, mit den Funken-Steckern, aber es funktioniert nicht. Die Beschreibungen sind noch leer
BigQueryConfiguration.configureBigQueryOutput(
bqConfiguration, projectId, bqDatasetId, bqTable, schema)
bqConfiguration.set(
"mapreduce.job.outputformat.class",
classOf[BigQueryOutputFormat[_,_]].getName)
new JavaPairRDD(rdd.map((null, _))).saveAsNewAPIHadoopDataset(bqConfiguration)
}
DOUBLE EDIT: Hinzugefügt einige Code für Kontext
Versucht es mit dem Spark Connector, funktioniert aber nicht. Mein Schema enthält Beschreibungen, die jedoch nicht in der Spaltenbeschreibung angezeigt werden. –