Verwendung von UTF-16-Codierung in Python

Question

Ich versuche, nicht-ASCII-Zeichen in Python mit utf-16-le, zu kodieren und hier ist der Ausschnitt aus dem Code dafür:

import os 
import sys 

def run(): 
    print sys.getdefaultencoding() 
    reload(sys) 
    sys.setdefaultencoding('utf-16-le') 
    print sys.getdefaultencoding() 
    test_dir = unit_test_utils.get_test_dir("utkarsh") 
    dir_name_1 = '東京' 
    .... 
    .... 

if __name__ == '__main__': 
    run() 

Wenn dieser Code ist run, das ist der Fehler gesehen:

# /u/bin/python-qs /root/python/tests/abc.py -c  /root/test.conf  
  File "/root/python/tests/abc.py", line 27 
SyntaxError: Non-ASCII character '\xe6' in file /root/python/tests/abc.py on line 27, but no encoding declared; see http://www.python.org/peps/pep-0263.html for details 

Wie kann das behoben werden? Ich habe versucht, diese Zeile am Anfang der Datei hinzufügen, aber ohne Erfolg:

# -*- coding: utf-16-le -*- 

Der Fehler dieses Mal war:

# /u/bin/python-qs /root/python/tests/abc.py -c /root/test.conf 
    File "/root/python/tests/abc.py", line 2 
    import os 
import sys 
... 
... 
if __name__ == '__main__': 
    run() 

    ^
SyntaxError: invalid syntax 

Edit:

Zeile 27: dir_name_1 = '東京 '

Answer 1

Alles ist (fast) in Ordnung in dem Code, den Sie zeigen. Sie haben eine Quelldatei in UTF-8 (wie von Ihrem Kommentar über das Ergebnis des file Befehls angegeben), so die Linie

dir_name_1 = '東京' 

in der Tat ist (wie Sie eine Python 2.x verwenden):

dir_name_1 = '\xe6\x9d\xb1\xe4\xba\xac' # utf8 for 東京 

Das einzige Problem ist, dass auf der Leitung 27 (die Sie zeigen nicht) Sie tun etwas mit dem String UTF8-codiert, wahrscheinlich versuchen, es zu konvertieren (explizit oder implizit) Unicode ohne jede Codierung Angabe , so ascii wird als Standard genommen und Fehler ist dann normal, da \xe6 nicht in as cii Bereich. Sie sollten die Zeichenfolge explizit mit dir_name_1.decode('utf8')