Hinzufügen von Trennzeichen zu einer Textdatei mit Python

Question

Ich habe vor kurzem meine Arbeit als ETL Developer gestartet und als Teil meiner Übung, ich extrahiere Daten aus einer Textdatei mit Rohdaten. Meine Rohdaten sehen so aus, wie im Bild gezeigt.

Jetzt möchte ich Trennzeichen zu meiner Datendatei hinzufügen. Grundsätzlich möchte ich nach jeder Zeile ein Komma hinzufügen (,). Mein Code in Python sieht so aus.

with open ('new_locations.txt', 'w') as output: 
with open('locations.txt', 'r') as input: 
    for line in input: 
     new_line = line+',' 
     output.write(new_line) 

wo new_locations.txt die Ausgabetextdatei ist, locations.txt sind die Rohdaten.

Allerdings wirft es mir Fehler die ganze Zeit.

UnicodeDecodeError: 'charmap' codec can't decode byte 0x81 in position 3724: character maps to

Wo genau gehe ich falsch?

Answer 1

Wenn Sie eine Datei in python 3 in "Text" Modus öffnen Sie dann die Bytes in der Datei zu python (Unicode) Strings Lesen und Schreiben zu konvertieren. Die Standardcodierung ist plattformabhängig, ist jedoch normalerweise UTF-8.

Wenn Sie Latin-1 Encoding-Datei verwendet, sollten Sie öffnen mit

with open('locations.txt', 'r', encoding='latin_1') as input 

sollten Sie wahrscheinlich tun dies auch mit dem Ausgang, wenn Sie die Ausgabe auch in Latin-1 sein wollen.

Längerfristig sollten Sie wahrscheinlich alle Ihre Daten in ein Unicode-Format in den Datendateien konvertieren.

Answer 2

Wenn Sie also in die Datei schreiben, müssen Sie sie vor dem Schreiben codieren. Wenn Sie googlen, werden Sie viele Ergebnisse finden.

Hier ist, wie es getan werden kann:

output.write(new_line.encode('utf-8'))# or ascii 

Sie können auch ignorieren fragen, welche nicht umgesetzt werden kann, sondern dass wil Verlust von charachter verursacht und kann nicht die gewünschte Ausgabe sein, hier ist, wie das Wille geschehe:

output.write(new_line.encode('ascii','ignore'))# or 'utf-8'