Tabelle kopiert von einem SQL Server zu einem anderen - Kann verknüpft sie nicht

Question

Ich habe zwei SQL-Server: MyServer und TheirServer. Ich habe nicht die Möglichkeit, diese beiden Server zu verbinden.

Ich möchte alle Daten aus einer Tabelle erhalten auf TheirServer und kopieren Sie sie in MyServer auf einer täglichen Basis. Die aktuelle Anzahl der Datensätze in der Tabelle ist über 600k und wird langsam zunehmen. Die Tabellen sind identisch, Spaltennamen und Datentypen.

Mein erster Gedanke war, zu versuchen, eine Datentabelle mit einer Select * Abfrage TheirServer zu füllen, und dann versuchen, ein SQLBulkCopy in MyServer. Dies verursacht natürlich eine System.OutOfMemoryException auf dem Webserver. Mit diesem Gedankengang ist mein nächster Angriffsplan, eine SQLDataReader zu verwenden, um 50k Datensätze gleichzeitig zu ziehen, dann zu lesen und BulkCopy diese Datensätze zu spülen, zu spülen und zu wiederholen. Bevor ich das tat, dachte ich, ich würde sehen, ob ich das falsch mache.

Hinweis: Da ich nur nach einer Best Practice frage, ist es mir egal, ob der Code in C# oder VB ist oder ob überhaupt Code vorhanden ist.

Answer 1

Die Befehlszeile (Shell) ist dein Freund. Überprüfen Sie die bcp utility.

Verwendung für Ihr Szenario ist ziemlich einfach:

bcp src-database.dbo.src-table out "c:\work\datafile.dat" -S srcSQLServerInstance -E -n 
bcp tgt-database.dbo.tgt-table int "c:\work\datafile.dat" -S tgtSQLServerInstance -E -n 

Sie werden das Ziel (Target) Tabelle vor dem Laden in den neuen Datenabfall müssen gestutzt.

Dies kann alles in einer * .cmd Batch-Datei getan und geplant werden.

Alternativ können Sie ein SSIS- oder DTS-Paket schreiben, um dasselbe zu erreichen und es in SQL Server zu planen.

Ich selbst mag es, ein Skript zu haben, das leicht debuggt/getestet werden kann.