Unix While-Loop dauert lange

Question

Ich habe eine While-Schleife geschrieben, um eine Datei Zeile für Zeile zu lesen.

while read file 
do 
    FileFound="`find $DataDir -name $file -print 2>/dev/null`" 
    if [ -n "$FileFound" ]; then 
    echo $FileFound >> ${runDir}/st_$Region 
    else 
    echo $file >> ${APP_HOME}/${Region}_filesnotfound_$date.txt 
    fi 
done < ${Region}_${date}.txt 

Für 8000 Datensätze dauerte es fast 2 Tage zu vervollständigen. Wie optimiere ich es?

Answer 1

Der Grund Ihrer Schleife eine lange Zeit nimmt, weil es ist find 8000 Mal ausgeführt wird, einmal für jede Datei! Das ist sehr teuer. Sie können eine einzige find für alle Dateien unter $ DataDir ausführen, speichern Sie es in einer Datei und verwenden Sie es dann zum Nachschlagen Ihrer Dateien. Das würde deine Schleife dramatisch beschleunigen.