Listen Sie alle Wörter in einer Textdatei mit Häufigkeitszählungen auf?

Question

Angenommen, ich habe Datei text.txt wie folgt:

she likes cats, and he likes cats too.

ich mein Ergebnis aussehen mag:

she 1 
likes 2 
cats 2 
and 1 
he 1 
too 1 

Wenn space , . in sie setzen würde die Skripte einfacher machen, das wäre fein.

Gibt es eine einfache Shell-Pipeline, die dies erreichen könnte?

Answer 1

Hier ist ein Einzeiler Nähe und Liebe zu meinem Herzen:

cat text.txt | sed 's|[,.]||g' | tr ' ' '\n' | sort | uniq -c 

Die sed Streifen Interpunktion (Melodie regex nach Geschmack), setzt die tr die Ergebnisse ein Wort pro Zeile.

Answer 2

Mit GNU awk können Sie einfach der Record-Separator (RS) gibt eine beliebige Folge von nicht-alphabetischen Zeichen sein:

$ gawk -v RS='[^[:alpha:]]+' '{sum[$0]++} END{for (word in sum) print word,sum[word]}' file 
she 1 
likes 2 
and 1 
too 1 
he 1 
cats 2 

aber das wird das Problem nicht lösen, wie zu erkennen „Worte“ in Allgemeines.