В настоящее время я переношу скрипт Python2 на Python3 и имею проблемы с этой строкой:
print('\xfe')
Когда я запускаю его с Python2 python test.py > test.out, файл состоит из шестнадцатеричных значений FE 0A, как и ожидалось.
Но когда я запускаю его с Python3 python3 test.py > test.out, файл состоит из шестнадцатеричных значений C3 BE 0A.
Что здесь не так? Как я могу получить желаемый результат FE 0A с помощью Python3.
Последовательность байтов C3 BE представляет собой кодированное UTF-8 представление символа U+. 00FE.
Python 2 обрабатывает строки как последовательность байтов, а не символов. Итак, '\xfe' — это объект str, содержащий один байт.
В Python 3 строки представляют собой последовательности символов (Unicode). Таким образом, код '\xfe' представляет собой строку, содержащую один символ. Когда вы печатаете строку, она должна быть закодирована в байты. Поскольку ваша среда выбрала кодировку по умолчанию UTF-8, она была закодирована соответствующим образом.
Как это решить, зависит от ваших данных. Это байты или символы? Если байты, то измените код, чтобы сообщить интерпретатору: print(b'\xfe'). Если это символы, но вы хотели другую кодировку, то закодируйте строку соответствующим образом: print( '\xfe'.encode('latin1') ).
python3 test.py >test.out) шестнадцатеричное значение FE в test.out.
- person Jakube; 14.08.2015
FE 0A), а не три байта (CE BE 0A).
- person Jakube; 14.08.2015
print(). print() применяет repr() к объекту, поскольку это не строка, затем кодирует результирующую строку и записывает ее.
- person dsh; 14.08.2015
str в Python 3 содержат символы Unicode, а bytes — это отдельный тип данных.
- person dsh; 14.08.2015
print '\xfe' Код Python 2 примерно эквивалентен этому коду Python 3:
sys.stdout.buffer.write(b'\xfe' + os.linesep.encode())
в то время как print('\xfe') код Python 3 примерно эквивалентен этому коду Python 3:
sys.stdout.buffer.write((u'\xfe' + os.linesep).encode(sys.stdout.encoding))
В первом случае Python печатает байты. Во втором случае он печатает Unicode, и результат зависит от вашей среды (локали).
>>> u'\xfe'.encode('utf-8')
b'\xc3\xbe'
Для печати текста всегда используйте Unicode в Python. Не задавайте жестко кодировку символов, используемую текущей средой в вашем скрипте.
Чтобы распечатать двоичные данные, такие как данные изображения, сжатые данные (gzip), зашифрованные данные, см. Как записать байты в файл в Python 3 без зная кодировку?
print(argument) преобразует аргумент с помощью str() (если необходимо), а затем вызывает file.write(string). file является необязательным аргументом print(), и по умолчанию он равен sys.stdout. Это означает, что вы должны быть в состоянии сделать то же самое с sys.stdout.write(str(argument) + '\n'). Итак, результат зависит от используемой кодировки, которую вы можете получить от sys.stdout.encoding. Если вы передаете еще один аргумент file, то объект файла должен быть открыт для записи в режиме text, и, возможно, может быть применена другая кодировка.
