Das Kopieren von Massendaten in einer SQL-Server Datenbank kann ganz schön viel Zeit in Anspruch nehmen. Um Daten von einer Tabelle in eine andere zu schieben – zum Beispiel um Erweiterungen an einer Faktentabelle vorzunehmen – können einige Stunden ins Land ziehen. Ganz abgesehen von dem nicht unerheblichen Speicherbedarf für das Log-File.
Vor kurzem hatten wir einen Fall, bei dem es genau darauf ankam: Über 200 Mio. historisierte Datensätze in einer Faktentabelle, die wegen einer Erweiterung des Datenmodells “im Weg” waren. Nach der Anpassung des Datenmodells mit dem Modeler dauerte es fast einen ganzen Tag, bis die Daten mit der INSERT-Anweisung von der Faktentabelle in eine temporäre Tabelle und wieder zurückgespielt waren. Für die lange Laufzeit war hauptsächlich das Log-Verhalten des SQL-Servers verantwortlich.
Heute möchten wir ein paar Möglichkeiten vorstellen, wie Daten aus einer Tabelle heraus übertragen werden können, ganz ohne eine Spur im Datenbank-Log.
SELECT … INTO
Die einfachste Art, um Daten von einer Tabelle in eine neue Tabelle zu übertragen ist die SELECT … INTO-Anweisung. Damit wird auf der Basis der SELECT-Abfrage eine neue Tabelle angelegt, die genau die gleiche Spaltendefinition wie die Ursprungstabelle hat.
SELECT * INTO MyNewTable FROM T_FACT_01_MyBigFatTable [WHERE ];
Mit dieser einfachen Anweisung werden die Daten am Log vorbei von der Ursprungstabelle in eine neue Tabelle übertragen. Es können über die WHERE-Klausel sogar Einschränkungen vorgenommen werden.
Damit verkürzt sich die Zeit für die Übertragung im Gegensatz zur INSERT-Anweisung erheblich. Ein Nachteil ist jedoch, dass die Zieltabelle vorher nicht existieren darf. Sie wird auf der Basis der im SELECT-Statement angegebenen Spalten neu erstellt.
BULK COPY (bcp.exe)
Zu den Bordmitteln jeder SQL-Server Installation gehört das Hilfsprogramm bcp.exe. Damit können Daten aus einer SQL-Server Datenbank in eine Datei – und auch wieder zurück – übertragen werden.
SWITCH
Der schnellste Weg um Daten aus einer Tabelle in eine andere – strukturgleiche – Tabelle zu Übertragen ist das SWITCH-Statement. Innerhalb weniger Millisekunden werden die Daten von einer Tabelle in die andere umgehängt. Das Statement sieht auch ziemlich einfach aus:
ALTER TABLE SWITCH MySourceTable TO MyDestinationTable
Dabei müssen die Quell- und die Zieltabelle aber genau gleiche Strukturen aufweisen – sonst funktioniert es nicht. Aber um vor dem CreateSnowflake die Daten aus der Faktentabelle zu sichern und die Faktentabelle zu leeren ist dies wirklich die schnellste aller Möglichkeiten. Allerdings muss hier die Zieltabelle – anders als beim SELECT … INTO-Statement – bereits existieren.
