MySQL-Konsole langsam beim Import von großen SQL-Dateien

Question

Mein Import von SQL über die MySQL-Konsole ist ziemlich langsam, und da unsere SQL-Datei jeden Tag zunimmt, würde ich gerne wissen, ob es Alternativen gibt, wie Sie importieren SQL-Datei schneller.

Der Wechsel zu Oracle oder anderen Systemen ist keine Option, die Konfiguration muss gleich bleiben.

Derzeit ist die SQL-Datei: 1,5 GB. Ich bin auf WAMP mit Apache 2.2.14, PHP 5.2.11 und MySQL 5.1.41.

Vielleicht ist das Problem hier, Import wird durch eine einfache getan:

mysql -u username -p dbname < sqlfilename.sql 

Irgendwelche Vorschläge?

Answer 1

Wenn Indizes während des Imports aktiviert sind, verlangsamt sich der Server auf Crawl. ALTER TABLE Tabellenname DISABLE KEYS; und die Verwendung von ..ENABLE KEYS vor und nach dem Import, wird die Importgeschwindigkeit verbessern, aber es wird einige Zeit dauern, Indizes neu zu erstellen, so dass es vielleicht kein großer Geschwindigkeitsgewinn ist.

Auch bietet die Verwendung von myisam -Tabellen (im Gegensatz zu innodb mit referenziellen Integritätsoptionen) normalerweise eine bessere Leistung, da keine referenziellen Integritätskosten anfallen.

Persönlich verwende ich nicht import-Anweisung von mysql-Konsole, aber importieren Sie SQL-Dateien mit mysql -uUSER -pPASS DBNAME < file.sql, und es funktioniert gut für mich.

Ich hoffe, es hilft.

Answer 2

Ich bin mir nicht sicher, ob dies Ihr Problem lösen wird, weil ich nicht sicher bin, wo der Engpass ist ... Allerdings war ich sehr beeindruckt von dem kostenlosen Toad for MySQL Tool als Ersatz MySQL Management Console. Es hat großartige Import-Tools und ist in der Regel IMO besser als die Standard-MySQL-Management-Konsole.

Answer 3

Versuchen Sie diese http://dev.mysql.com/doc/refman/5.5/en/optimizing-innodb-bulk-data-loading.html

Es ist vielleicht ein autocommit Problem, dass deaktivieren dann sehen, was dann geschieht.

SET autocommit=0 ; source <your dump file> ; COMMIT ; 

Answer 4

Schalt autocommit ausgeschaltet ist die erste einer Reihe von in Bulk Data Loading for InnoDB Tables gegebenen Empfehlungen zu beschleunigen Operationen für MySQL wiederherzustellen.

Anstatt Autocommit manuell zur Wiederherstellungszeit zu wechseln, können Sie Ihre MySQL-Daten bereits auf eine Weise ausgeben, die alle notwendigen Anweisungen direkt in Ihre SQL-Datei enthält.

Der Befehlszeilenparameter für mysqldump lautet --no-autocommit. Sie können auch erwägen, --opt hinzuzufügen, die eine Kombination anderer Parameter festlegt, um Wiederherstellungsvorgänge zu beschleunigen. Hier

ist ein Beispiel für eine komplette mysqldump Kommandozeile, wie ich es verwenden, mit --no-autocommit und --opt:

mysqldump -hlocalhost -uMyUser -p'MyPassword' --no-autocommit --opt --default-character-set=utf8 --quote-names MyDbName > dump.sql 

Einzelheiten dieser Parameter finden Sie in der reference of mysqldump