Verbessern Sie die Geschwindigkeit beim Aktualisieren vorhandener Datensätze (~ 11.000) in den Core-Daten

Question

Ich analysiere eine Tonne Daten, die ich anfänglich in einen Core-Datenspeicher einfüge.

Zu einem späteren Zeitpunkt, Parsing ich die gleiche XML, obwohl einige Mai wurden aktualisiert. Was ich dann tue, ist, nach einem existierenden Datensatz mit dem gleichen Tag zu suchen, und wenn es einen bereits gibt, aktualisiere ich den Datensatz mit den Daten.

Während meine erste Analyse (etwa 11.000 Datensätze) dauert etwa 8 Sekunden, scheint die Aktualisierung teuer und dauert 144 Sekunden (das sind Simulator läuft, also deutlich länger auf tatsächlichen Geräten).

Während das erste Mal in Ordnung ist (ich zeige einen Fortschrittsbalken), ist der zweite unannehmbar lang, und ich möchte etwas tun, um die Geschwindigkeit zu verbessern (obwohl es im Hintergrund in einem separaten Thread passiert) .

Leider ist es keine Frage von find-or-create, da die Daten in der XML für einzelne Datensätze geändert haben können, so dass jeder im Wesentlichen ein Update benötigt.

Ich habe die Attribute indiziert, was das erste Parsing und die Aktualisierung ebenfalls beschleunigt hat, aber es ist immer noch langsam (die obigen Zahlen beziehen sich auf die Indizierung). Was mir aufgefallen ist, dass sich das Parsen/Aktualisieren allmählich verlangsamt. Während anfänglich schnell, wird es immer langsamer, da immer mehr Platten bearbeitet werden.

Meine Frage ist also, ob irgendetwas Vorschläge für mich hat, wie ich die Geschwindigkeit verbessern könnte, mit der ich meinen Datensatz aktualisiere? Ich verwende MagicalRecord zum Abrufen des Datensatzes. Hier ist der Code:

Record *record; 
if (!isUpdate) { 
    record = [NSEntityDescription insertNewObjectForEntityForName:@"Record" inManagedObjectContext:backgroundContext]; 
} else { 
    NSPredicate *recordPredicate = [NSPredicate predicateWithFormat:@"SELF.tag == %@", [[node attributeForName:@"tag"] stringValue]]; 
    record = [Record findFirstWithPredicate:recordPredicate]; 
} 

Answer 1

Anstatt Tonnen von Abrufen zu tun, machen Sie eine Abfrage für jeden Entitätstyp und speichern Sie sie in einem Wörterbuch nach Tag, dann überprüfen Sie einfach das Wörterbuch, wenn es ein Objekt mit diesem Schlüssel gibt. Sie sollten in der Lage sein, die Eigenschaft "ToToFetch" so festzulegen, dass nur das Tag eingeschlossen wird. Dies sollte den Overhead reduzieren.

Answer 2

Eine Sache, die Sie versuchen könnten, würde eine Vorlage NSPredicate verwenden, so dass Sie nicht wieder Parsen das Format-String für jeden finden/holen, dass Sie tun.

Also, bevor Sie Ihre Schleife eingeben:

NSPredicate *template = [NSPredicate predicateWithFormat:@"SELF.tag == $RECORD_TAG"]; 

innerhalb der Schleife:

Record *record; 
if (!isUpdate) { 
    record = [NSEntityDescription insertNewObjectForEntityForName:@"Record" inManagedObjectContext:backgroundContext]; 
} else { 
    NSPredicate *recordPredicate = []; 
    record = [Record findFirstWithPredicate:[template predicateWithSubstitutionVariables:[NSDictionary dictionaryWithObject:[[node attributeForName:@"tag"] stringValue] forKey:@"RECORD_TAG"]]; 
} 

See Apple Predicate Programming Guide für weitere Informationen.

Answer 3

Sie könnten auch eine Kombination von Senior's Antwort mit Hashing der Eigenschaften versuchen.

Beim Einfügen Hash-Eigenschaften und speichern Sie diesen Hash als eine Art Prüfsummen-Eigenschaft der Record.
Bei Aktualisierung legen Sie die abgerufenen Eigenschaften als Tag und Prüfsumme fest und führen einen Abruf aller Elemente durch. Wenn Sie dann über Ihren Datensatz iterieren, wenn die Prüfsumme von der Abfrage abweicht, können Sie diese Record abrufen und aktualisieren.

Answer 4

Die erste Antwort auf ALLE Leistungsprobleme ist das Ausführen von Instrumenten. Mit diesen Daten können Sie Ihre Problembereiche identifizieren. Von da an können Sie weitere spezifische Fragen zu bestimmten Aspekten der Leistungsverbesserung haben.

Wir Menschen sind notorisch schlecht darin, Leistungsengpässe zu identifizieren. Also, benutze zuerst die Instrumente. Es wird Ihnen sicherlich sagen, wo Ihre Zeit verbracht wird.