Win32 API FindFirstFile und FindNextFile Leistung vs Befehlszeile

Wir haben ein unerwartetes Leistungsproblem beim Durchlaufen von Verzeichnissen auf der Suche nach Dateien mit einem Platzhaltermuster aufgetreten.Win32 API FindFirstFile und FindNextFile Leistung vs Befehlszeile

Wir haben 180 Ordner mit jeweils 10.000 Dateien. Eine Befehlszeilensuche mit dir <pattern> /s wird fast sofort abgeschlossen (< 0,25 Sekunden). Allerdings dauert die Suche in unserer Anwendung zwischen 3 und 4 Sekunden.

Wir versuchten zunächst System.IO.DirectoryInfo.GetFiles() mit SearchOption.AllDirectories mit und haben versucht nun die Win32-API FindFirstFile() und FindNextFile() aufruft.

Profiling unserer Code mit zeigt an, dass die überwiegende Mehrheit der Ausführungszeit für diese Anrufe ausgegeben wird.

Unser Code ist auf der folgenden Blog-Post basiert:

http://codebetter.com/blogs/matthew.podwysocki/archive/2008/10/16/functional-net-fighting-friction-in-the-bcl-with-directory-getfiles.aspx

Wir fanden diese aktualisiert, so langsam zu sein, um die GetFiles Funktion ein string Suchmuster eher als ein Prädikat zu nehmen.

Kann jemand Licht in die Frage bringen, was mit unserem Ansatz falsch sein könnte?

Quelle

2009-11-23 Richard Everett

Was verwenden Sie für die Suche über die Befehlszeile? Könnte es sein, dass es die Windows-Suchindizes verwendet, um die Abfrage durchzuführen, anstatt jede Datei durchzugehen? –

@Matt Wir machen nur ein 'dir/s' (habe meinen Beitrag entsprechend aktualisiert). –

Klingt verdächtig. Ich bin mir ernsthaft sicher, dass "dir" alles andere als FindFirstFile/FindNextFile verwendet. Vielleicht missbrauchst du sie. Könnten Sie einen Ausschnitt bereitstellen, der veranschaulicht, wie Sie sie verwenden? – sharptooth

Sie können mit einer Implementierung von FindFirstFile und FindNextFile I einmal blogged über versuchen.

Quelle

2009-11-23 10:37:23

Unser Ansatz ist dem Darin sehr ähnlich –

Ich habe meine Lösung getestet und es dauert 230 Millisekunden Zählen Sie ein Verzeichnis auf, das> 100K Dateien enthält. –

Eine weitere Beschleunigung kann mit 'FindFirstFileEx (... FindExInfoBasic ...) erreicht werden.' – MSalters

Versuchen Sie IShellFolder::EnumObjects mit SHGetDataFromIDList/IShellFolder::GetAttributesOf.

Pro/Kons here.

Quelle

2009-11-23 20:12:18

In meinen Tests FindFirstFileEx mit FindExInfoBasic und FIND_FIRST_EX_LARGE_FETCH mit viel schneller ist als die Ebene Findfirstfile.

Das Scannen von 20 Ordnern mit ~ 300.000 Dateien dauerte 661 Sekunden mit FindFirstFile und 11 Sekunden mit FindFirstFileEx. Nachfolgende Aufrufe an die gleichen Ordner dauerte weniger als eine Sekunde.

HANDLE h = FindFirstFileEx (search.c_str(), FindExInfoBasic, & Daten, FindExSearchNameMatch, NULL, FIND_FIRST_EX_LARGE_FETCH);

Quelle

2013-04-02 23:44:17 KPexEA

Win32 API FindFirstFile und FindNextFile Leistung vs Befehlszeile

Antwort

Verwandte Themen