Python: Zeilen aus komprimierten Textdateien lesen

Question

Ist es einfach, eine Zeile aus einer gz-komprimierten Textdatei mit Python zu lesen, ohne die Datei vollständig zu extrahieren? Ich habe eine Text.gz Datei, die ungefähr 200mb ist. Wenn ich es extrahiere, wird es 7,4 GB. Und das ist nicht die einzige Datei, die ich lesen muss. Für den gesamten Prozess muss ich 10 Dateien lesen. Obwohl dies eine sequenzielle Arbeit sein wird, denke ich, dass es eine schlaue Sache ist, dies zu tun, ohne die gesamte Information auszubeuten. Ich weiß nicht einmal, dass es möglich ist. Wie kann es mit Python gemacht werden? Ich muss eine Textdatei Zeile für Zeile lesen.

Answer 1

Haben Sie versucht, gzip.GzipFile zu verwenden? Argumente sind ähnlich wie open.

Answer 2

Sie könnten das Standard-Gzip-Modul in Python verwenden. Verwenden Sie einfach:

gzip.open('myfile.gz') 

, um die Datei als jede andere Datei zu öffnen und seine Zeilen zu lesen.

Weitere Informationen hier: Python gzip module

Answer 3

Mit gzip.GzipFile:

import gzip 

with gzip.open('input.gz','r') as f: 
    for line in f: 
     print('got line', line) 

Hinweis : für python3 haben Sie die Datei angeben, in 'rt', als 'r' standardmäßig binäres Lesen geöffnet werden, oder Ansonsten verwenden Sie line.decode(...).

Hinweis : gzip.open(filename, mode) ist ein Alias ​​für gzip.GzipFile(filename, mode). Ich bevorzuge die ehemalige, wie es ähnlich aussieht with open(...) as f: zum Öffnen von unkomprimierten Dateien verwendet.