Lesen, Bearbeiten und Neuschreiben von Text in Datei mit Python

Question

Wie kann ich Daten aus einer Datei lesen, die Daten bearbeiten und wieder in die Datei schreiben, ohne Speicher auf eine temporäre Datei zu verschwenden, wenn die Datei zu groß für die Verarbeitung ist in einem Stück?

Answer 1

sollte der folgende Code arbeiten:

chunksize = 64*1024 #arbitrary number 
offset = 0 
with open(path, 'r+b') as file: 
    while True: 
     file.seek(chunksize*offset) # sets pointer to reading spot 
     chunk = file.read(chunksize) 
     if len(chunk) == 0: # checks if EoF 
      break 
     elif len(chunk) % 16 != 0: # adds bytes to the chunk if it is the last chunk and size doesnt divide by 16 (if processing text of specific size, my case 16 bytes) 
      chunk += ' ' * (16 - len(chunk) % 16) 
     file.seek(chunksize*offset) # returns pointer to beginning of the chunk in order to rewrite the data that was encrypted 
     file.write(do_something(chunk)) # edits and writes data to file 
     offset += 1 

Der Code liest die Daten, kehrt an den Anfang des Blockes und überschreibt sie. Es wird nicht funktionieren, wenn die manipulierten Daten größer als die gelesenen Daten sind.