Cómo convertir una cadena a utf-8 en Python

Si los métodos anteriores no funcionan, también puede decirle a Python que ignore partes de una cadena que no puede convertir a utf-8:

stringnamehere.decode('utf-8', 'ignore')

Puede ser un poco exagerado, pero cuando trabajo con ascii y unicode en los mismos archivos, repetir la decodificación puede ser un dolor, esto es lo que uso:

def make_unicode(input):
    if type(input) != unicode:
        input =  input.decode('utf-8')
        return input
    else:
        return input

Si lo entiendo correctamente, tiene una cadena de bytes codificada en utf-8 en su código.

La conversión de una cadena de bytes a una cadena unicode se conoce como decodificación (unicode- > byte-string es codificación).

Lo hace usando la función unicode o el método decode. O bien:

unicodestr = unicode(bytestr, encoding)
unicodestr = unicode(bytestr, "utf-8")

O:

unicodestr = bytestr.decode(encoding)
unicodestr = bytestr.decode("utf-8")

Agregar la siguiente línea a la parte superior de su .py archivo:

# -*- coding: utf-8 -*-

Te permite codificar cadenas directamente en tu script, así:

utfstr = "ボールト"

city = 'Ribeir\xc3\xa3o Preto'
print city.decode('cp1252').encode('utf-8')

En Python 3.6, no tienen una función unicode() incorporada. Para convertir una cadena a unicode, simplemente obtenga el valor unicode del carácter y haga esto:

my_str = "\u221a25"
my_str = u"{}".format(my_str)
print(my_str)
>>> √25

Traducir con ord() y unichar(). Cada carácter unicode tiene un número asociado, algo así como un índice. Así que Python tiene algunos métodos para traducir entre un char y su número. La desventaja es un ejemplo ñ. Espero que pueda ayudar.

>>> C = 'ñ'
>>> U = C.decode('utf8')
>>> U
u'\xf1'
>>> ord(U)
241
>>> unichr(241)
u'\xf1'
>>> print unichr(241).encode('utf8')
ñ