Löschen Sie alle Datensätze, die nicht die neuesten sind

Question

Ich habe eine Tabelle, die absichtlich Duplikate enthält. In diesem Fall sind die Dinge, die dupliziert werden, eine deviceId und die datetime. Manchmal aktualisiert der Kunde seine Daten. Die Tabelle hat drei Spalten: deviceId, datetime und value (es gibt einen inkrementellen Primärschlüssel). Manchmal, wenn der Kunde seine Daten neu bewertet, bemerken sie, dass der Wert falsch ist, aktualisieren ihn dann und senden die Daten zur erneuten Verarbeitung. Als Konsequenz muss ich in der Lage sein, Datensätze zu löschen, die nicht die neuesten Datensätze sind. Ich kann es nicht nach Datum und Uhrzeit tun, da dies in einigen Fällen auch dupliziert wird und ich die Staging-Tabelle nicht abschneiden kann.

die Betrogenen löschen ich folgendes haben:

;WITH DupeData AS (
SELECT ROW_NUMBER() OVER(PARTITION BY tblMeterData_Id,fldDateTime, fldValue, [fldBatchId],[fldProcessed] ORDER BY fldDateTime) AS ROW 
FROM [Stage.tblMeterData]) 
DELETE FROM DupeData 
WHERE ROW > 1 

Das Problem dabei ist es eine zufällige Duplikat zu löschen scheint.

Ich möchte die neueste Rekord halten, die in den Staging-Bereich ist und alle anderen löschen, die nicht die letzte Aufzeichnung sind. Ich kann dann die relevante Zeile mit dem neuen Wert aktualisieren, mit den neuesten Daten, wenn ich es von Staging in Prod nehme.

Answer 1

ist jede primäre oder eindeutigen Schlüssel auf dem Tisch? wenn es eindeutige ID - die einfachste Art und Weise unter über die Leistung nicht sicher, aber sollte auf kleine Mengen

DELETE FROM DupeData 
where id in 
(select id from 
(SELECT id, 
    ROW_NUMBER() OVER(PARTITION BY tblMeterData_Id,fldDateTime, fldValue, [fldBatchId],[fldProcessed] ORDER BY fldDateTime) AS ROW 
FROM [Stage.tblMeterData]) 
) q 
where q.row > 1)