Python: символ Unicode U + 2212 Причинение ошибок при работе с подпроцессом [duplicate]

На Ubuntu 12.10 и терминале GNOME ошибка не возникает, когда программа печатает на stdout или подключается к каналу для других программ. И кодирование файлов, и терминальное кодирование - UTF-8 .

$ cat a.py
# -*- coding: utf-8 -*-
print "åäö"
$ python a.py
åäö
$ python a.py | tee out
åäö

Какую ОС и эмулятор терминала вы используете? Я слышал, что некоторые из моих коллег сталкиваются с подобными проблемами при использовании iTerm & nbsp; 2 и OS X; iTerm & nbsp; 2 может быть виновником.

Обновление: этот ответ неверен - подробнее см. комментарии

Вы можете попробовать изменить переменную окружения «PYTHONIOENCODING» на «utf_8». .

import sys, locale, os
print(sys.stdout.encoding)
print(sys.stdout.isatty())
print(locale.getpreferredencoding())
print(sys.getfilesystemencoding())
print(os.environ["PYTHONIOENCODING"])
print(chr(246), chr(9786), chr(9787))

utf_8
False
ANSI_X3.4-1968
ascii
utf_8
ö ☺ ☻

Я столкнулся с этой проблемой в устаревшем приложении, и было трудно определить, где было напечатано. Я помог себе с этим взломом:

# encoding_utf8.py
import codecs
import builtins


def print_utf8(text, **kwargs):
    print(str(text).encode('utf-8'), **kwargs)


def print_utf8(fn):
    def print_fn(*args, **kwargs):
        return fn(str(*args).encode('utf-8'), **kwargs)
    return print_fn


builtins.print = print_utf8(print)

В верхней части моего скрипта test.py:

import encoding_utf8
string = 'Axwell Λ Ingrosso'
print(string)

Обратите внимание, что это изменяет ВСЕ вызовы на печать, чтобы использовать кодировку, поэтому ваша консоль будет печатать это:

$ python test.py
b'Axwell \xce\x9b Ingrosso'

У меня была аналогичная проблема на прошлой неделе . Это было легко исправить в моей IDE (PyCharm).

Вот мое исправление:

Начиная с панели меню PyCharm: Файл -> Настройки ... -> Редактор -> Файл Кодировки, а затем установите: «Кодирование IDE», «Кодирование проекта» и «Кодировка по умолчанию для файлов свойств» ALL для UTF-8, и теперь она работает как прелесть.

Надеюсь, что это поможет!

Во-первых, в отношении этого решения:

# -*- coding: utf-8 -*-
print u"åäö".encode('utf-8')

Невозможно явно печатать с данной кодировкой каждый раз. Это будет повторяющимся и подверженным ошибкам.

Лучшим решением является изменение sys.stdout в начале вашей программы для кодирования с выбранной кодировкой. Вот одно из решений, которое я нашел на Python: Как выбрано sys.stdout.encoding? , в частности комментарий «toka»:

import sys
import codecs
sys.stdout = codecs.getwriter('utf8')(sys.stdout)

Я мог бы «автоматизировать» его с помощью вызова:

def __fix_io_encoding(last_resort_default='UTF-8'):
  import sys
  if [x for x in (sys.stdin,sys.stdout,sys.stderr) if x.encoding is None] :
      import os
      defEnc = None
      if defEnc is None :
        try:
          import locale
          defEnc = locale.getpreferredencoding()
        except: pass
      if defEnc is None :
        try: defEnc = sys.getfilesystemencoding()
        except: pass
      if defEnc is None :
        try: defEnc = sys.stdin.encoding
        except: pass
      if defEnc is None :
        defEnc = last_resort_default
      os.environ['PYTHONIOENCODING'] = os.environ.get("PYTHONIOENCODING",defEnc)
      os.execvpe(sys.argv[0],sys.argv,os.environ)
__fix_io_encoding() ; del __fix_io_encoding

Да, здесь можно получить бесконечный цикл, если этот «setenv» терпит неудачу.

export PYTHONIOENCODING=utf-8

выполняет задание, но не может установить его на самом python ...

то, что мы можем сделать, это проверить, не задано ли значение и сообщить пользователю установить его перед вызовом сценария с:

if __name__ == '__main__':
    if (sys.stdout.encoding is None):
        print >> sys.stderr, "please set python env PYTHONIOENCODING=UTF-8, example: export PYTHONIOENCODING=UTF-8, when write to stdout."
        exit(1)

Обновить для ответа на комментарий: проблема существует только при переходе на стандартный вывод. Я тестировал в Fedora 25 Python 2.7.13

python --version
Python 2.7.13

cat b.py

#!/usr/bin/env python
#-*- coding: utf-8 -*-
import sys

print sys.stdout.encoding

работает ./b.py

UTF-8

работает ./b.py | меньше

None

Доказанная санированная версия ответа Крейга МакКуина.

import sys, codecs
class EncodedOut:
    def __init__(self, enc):
        self.enc = enc
        self.stdout = sys.stdout
    def __enter__(self):
        if sys.stdout.encoding is None:
            w = codecs.getwriter(self.enc)
            sys.stdout = w(sys.stdout)
    def __exit__(self, exc_ty, exc_val, tb):
        sys.stdout = self.stdout

Использование:

with EncodedOut('utf-8'):
    print u'ÅÄÖåäö'