awk match Befehl und Speichernutzung

Question

Ich erkannte, dass mein awk Skript mehr und mehr Speicher verwendete, als die Zeit verging, wenn ich nichts im Speicher speichern sollte, also entschied ich mich, einige Tests zu machen.

Dies ist ein sehr einfaches Skript (meins ist größer, aber ich reproduzieren das Problem auf einem sehr einfachen). Mein awk Skript wird in einem bash Skript verwendet, die $file Variable ist die Datei, auf der die awk ausgeführt wird.

awk '  
{ 
    if(match($0,"word")) 
    {   
     line=substr($0, RSTART - 20, RLENGTH + 20) 
     print line 
    } 
} 
' "$file" 

Wenn ich dieses Skript auf einer großen Datei ausführen, in der jede Zeile word enthält, die Speicherauslastung des awk Skript hebt super schnell, noch schneller, wenn ich in eine Datei drucken. Ich muss es stoppen, bevor es meinen Computer einfriert. Hast du eine Idee, was diese große Speichernutzung verursacht? In meinem echten Skript sind die Dateien normalerweise kleiner und die match Funktion wird nicht wie bei dieser Funktion in jeder Zeile ausgelöst, aber ich würde lieber sicher gehen, dass nichts Falsches passieren wird.

EDIT: Dieses Problem scheint nicht bei der Verwendung von Mawk, nur mit GNU awk, ich habe keine Ahnung, warum.

Answer 1

Der Versuch, diese Alternative

awk '  
/word/ { 
     # you can match here, if result of operation is needed for later action 
     print "hello" 
    } 
' "$file" 

Spiel auf jeder Zeile etwas mehr Rechen induzieren wie der Index des längsten Vorkommen definieren (Test viele Möglichkeiten), ... so ja, es ist exponantial mit Dateigröße (und Zeilengröße innen)

wenn Match ein conditionnal Teil, der aus den umliegenden Code getrennt sein cannotn, zumindest Index() anstelle von Match() zu verwenden (oder besser if($0 ~ /word/) wenn nicht anderes Ergebnis als Anwesenheitskontrolle das Ziel ist)

Answer 2

Das Problem scheint bei der Verwendung von Mawk nicht zu erscheinen, nur mit GNU awk.

löse ich das Problem, indem LC_ALL=C vor dem awk Skript, wie folgt aus:

LC_ALL=C awk '  
{ 
    if(match($0,"word")) 
    {   
     line=substr($0, RSTART - 20, RLENGTH + 20) 
     print line 
    } 
} 
' "$file" 

EDIT: Das Problem tritt nicht auf GNU 4.1.4 awk. Das scheint nur bei älteren Versionen zu passieren (meins war 3.1.3)