MYSQL: SELECT oder DELETE, das ist besser in Bezug auf die Leistung, um Doppelarbeit zu vermeiden

Question

Ich habe eine Tabelle mit Millionen von Datensätzen. Ich muss sicherstellen, dass Aufzeichnungen einzigartig sind. Ich frage mich, ob ein SELECT.. where ist besser oder DELETE..where?

Frage Update: Ich möchte nur UNIQUE RECORDS behalten.

Weitere Update

I Fäden und aus unerfindlichen Gründen leite sie dups in Tabke einfügen trotz der Überprüfung ... höchstwahrscheinlich auf die gleichzeitige Ausführung von SELECT. Also fragen, ob die Überprüfung der Existenz von Daten teurer ist als das Löschen von Zeilen, die mit den Datensätzen übereinstimmen?

Answer 1

Verwenden Sie INSERT IGNORE, um Fehler bei doppelten Schlüsseln zu vermeiden, wenn Sie versehentlich denselben Datensatz zweimal einfügen.

Hinweis: Das nur alle UNIQUE Schlüssel überprüft

Aber ... Das deutet darauf hin, dass Sie _DO nicht haben einen UNIQUE Schlüssel Duplikate in erster Linie zu verhindern (einschließlich des `PRIMARY KEY, falls angegeben.)!

Also, Ihre nächste Frage wird sein, wie Sie einen UNIQUE Schlüssel hinzufügen, wenn es bereits Duplikate gibt. Richtig.

Der Versuch, die Duplikate zu entdecken und zu löschen, ist komplex und mühsam, aber möglicherweise schneller.

Das ist einfach:

CREATE TABLE new LIKE real; 
ALTER TABLE new ADD UNIQUE ... -- some UNIQUE KEY to avoid duplicates 
# stop writes to `real` -- application-specific 
INSERT IGNORE INTO new SELECT * FROM real; 
RENAME TABLE real TO old, 
      new TO real; 
# allow writes again. 
DROP TABLE old;