Python UnicodeDecodeError: кодек 'ascii' не может декодировать байт 0xc3

Question

Я читаю конфигурационный файл в разделе создания python и создания новых файлов конфигурации для каждого раздела.

Однако .. Я получаю сообщение об ошибке декодирования, потому что одна из строк содержит Español=spain

self.output_file.write(what.replace(" = ", "=", 1)) 
UnicodeDecodeError: 'ascii' codec can't decode byte 0xc3 in position 4: ordinal not in range(128) 

Как бы я изменить свой код, чтобы для закодированных символов, таких, как эти? Я новичок в этом, так пожалуйста, простите меня, если это что-то просто ..

class EqualsSpaceRemover: 
    output_file = None 
    def __init__(self, new_output_file): 
     self.output_file = new_output_file 

    def write(self, what): 
     self.output_file.write(what.replace(" = ", "=", 1)) 

def get_sections(): 
    configFilePath = 'C:\\test.ini' 
    config = ConfigParser.ConfigParser() 
    config.optionxform = str 
    config.read(configFilePath) 
    for section in config.sections(): 
     configdata = {k:v for k,v in config.items(section)} 
     confignew = ConfigParser.ConfigParser() 
     cfgfile = open("C:\\" + section + ".ini", 'w') 
     confignew.add_section(section) 
     for x in configdata.items(): 
      confignew.set(section,x[0],x[1]) 
     confignew.write(EqualsSpaceRemover(cfgfile)) 
     cfgfile.close() 

Answer 1

Если вы используете python2 с from __future__ import unicode_literals то каждая строка символов вы пишете это юникод буквальная, как если бы вы префикс каждый литерал u"...", если вы явно не пишете b"...".

Это объясняет, почему вы получаете Unicode Decode Ошибка в этой строке:

what.replace(" = ", "=", 1) 

потому, что вы на самом деле сделать это

what.replace(u" = ",u"=",1) 

ConfigParser использует обычный старый str для своих товаров, когда он читает файл с использованием метода parser.read(), что означает what будет str. Если вы используете unicode в качестве аргументов для str.replace(), то строка преобразуется (декодируется) в unicode, применяется замещение, а результат возвращается как unicode. Но если what содержит символы, которые невозможно декодировать в Юникоде, используя кодировку по умолчанию, тогда вы получаете UnicodeDecodeError, где вы не ожидали бы этого.

Итак, чтобы сделать эту работу вы можете

• использование явных префиксы для байтовых строк: what.replace(b" = ", b"=", 1)
• или снимите unicode_litreals будущего импорта.

Как правило, вы не должны смешивать unicode и str (Python3 исправляет это, сделав ошибку в почти любом случае). Вы должны знать, что from __future__ import unicode_literals изменяет каждый без префикса литерал на unicode и автоматически не изменяет ваш код для работы с unicode во всех случаях. Во многих случаях совершенно наоборот.