Import bestimmte Spalten von CSV mit Google Cloud SQL

Question

Ich habe eine CSV mit mehreren Millionen Zeilen-Datei:

origin,destination,commute_time 
A,B,123 
C,D,234 
... 

Ich möchte diese in eine Tabelle laden in Google Cloud SQL die wie folgt aussieht:

CREATE TABLE commutes(
    id INT NOT NULL AUTO_INCREMENT, 
    origin VARCHAR(20), 
    destination VARCHAR(20), 
    time INT, 
    distance FLOAT, 
    PRIMARY KEY(id) 
); 

Cloud SQL verfügt über eine CSV-Import-Funktion:

Unfortu Dies setzt voraus, dass die CSV-Datei keine Kopfzeile hat (sie interpretiert die Kopfzeile als Daten). Außerdem wird davon ausgegangen, dass die CSV-Datei jede Spalte vom ersten bis zum letzten enthält. Die Spalte origin in der CSV-Datei wird daher als Spalte id in der Tabelle interpretiert.

Wie kann ich meine Daten in diese Tabelle importieren? Ich verwende Cloud SQL v2 Beta. Cloud SQL v1 hatte eine import API, mit der Sie eine Liste von Spalten angeben können, aber v2 hat noch keine API.

Answer 1

Der Trick besteht darin, die Spalten in Ihrer Tabelle neu anzuordnen, damit sie mit denen in der CSV übereinstimmen. Insbesondere möchten Sie Spalten wie id (die in Ihrer CSV fehlen) hinter die Spalten setzen, die vorhanden sind.

So sollte die Tabelle wie folgt aussehen:

CREATE TABLE commutes(
    origin VARCHAR(20), 
    destination VARCHAR(20), 
    time INT, 
    distance FLOAT, 
    id INT NOT NULL AUTO_INCREMENT, 
    PRIMARY KEY(id) 
); 

und die CSV sollte folgendermaßen aussehen:

A,B,123 
C,D,234 
... 

Die Cloud SQL V2 Quickstart seine Beispiel id Spalte in der letzten Position versetzt, so dass ich nehme an, dies ist ein Standardverfahren.