Zeichen mit Byte-Sequenz 0x9d in Codierung 'WIN1252' hat keine Entsprechung in Codierung 'UTF8'

Question

Ich lese eine CSV-Datei in meinem SQL-Skript und kopieren Sie ihre Daten in eine Postgre-SQL-Tabelle. Die Codezeile ist unten:

\copy participants_2013 from 'C:/Users/Acrotrend/Desktop/mip_sahil/mip/reelportdata/Participating_Individual_Extract_Report_MIPJunior_2013_160414135957.Csv' with CSV delimiter ',' quote '"' HEADER; 

Ich erhalte folgenden Fehler: Zeichen mit Bytefolge 0x9D in encoding ‚WIN1252‘ haben keine Entsprechung in encoding ‚UTF8‘.

Kann mir jemand helfen, was die Ursache dieses Problems und wie kann ich es lösen?

Answer 1

Das Problem ist, dass 0x9D kein gültiger Bytewert in WIN1252 ist. Es gibt eine Tabelle hier: https://en.wikipedia.org/wiki/Windows-1252

Das Problem kann sein, dass Sie eine UTF-8-Datei importieren und postgresql auf Windows-1252 ist in Verzug (was ich glaube, ist der Standard auf vielen Windows-Systemen).

Sie müssen den Zeichensatz in Ihrer Windows-Befehlszeile ändern, bevor Sie das Skript mit chcp ausführen. Oder in postgresql können Sie:

SET CLIENT_ENCODING TO 'utf8'; 

Bevor Sie die Datei importieren.

Answer 2

Jede Codierung hat numerische Bereiche gültigen Codes. Sind Sie sicher, dass Ihre Daten in win1252 encoding sind?

Postgres ist sehr streng und importiert keine möglichen beschädigten Kodierungsdateien. Sie können verwenden, das im toleranten Modus arbeiten kann, und es kann fehlerhafte Zeichen entfernen. Nach der Reinigung durch können Sie die Datei importieren.