Hello !

J'ai un souci d'encodage lorsque je souhaite écrire dans ma DB avec MySQLdb http://pastebin.com/xkV977f3

Je recupère des messages et je souhaite les envoyer à ma DB. Certains messages fonctionnent encodés mais sur d'autres (sûrement à cause de certains caractères) ça m'affiche l'erreur "Unexpected error: <type 'exceptions.UnicodeEncodeError'>"
J'ai déjà tout checké, encode, decode, unicode, rien ne marche.

J'ai # -- coding: utf-8 - au début de mon code. Je fais des requête html et je ne les touche pas avant cette partie du code. Je les parse avec BeautifulSoup

Pitié ça fait plus d'une heure

Et ça vient pas de la DB. J'ai encodé en utf-8_unicode et utf8_bin ça marche pas pour les deux

Et ben merde après près de 2h http://stackoverflow.com/questions/14630288/unicodeencodeerror-charmap-codec-cant-encode-character-maps-to-undefined

C'est très laid, pas très logique, mais ça marche

J'ai limite crawlé TOUT stackoverflow pour trouver ça, ainsi que Google, ce type est un génie !
Si quelqu'un a une autre solution je suis preneur

Ah ben nan, ça m'affiche "Nous avons très vite à l??il " au lieu de "Nous avons très vite à l’œil" par exemple

Et le type dit dans son post que les "-" sont changés en "?" aussi

J'ai eu un problème similaire (mais rien à voir avec les db).

Dans mon cas, je récupérais des strings à partir de fichier. J'avais des problèmes d'encodages, et j'ai aussi essayé plein de choses sans succès. Finalement j'ai utilisé le module codecs (import codecs), puis j'ouvrais mes fichiers (pour lecture) avec :

f = codecs.open(filename, encoding='utf-8')

Ca marche avec python 3.x

Triple14 C'est terrible
Mon code est portable sous windows sous Python 2.7
J'vais voir ce qu'est encoding, mais comme j'ai non plus rien à voir avec l'écriture de fichier ça va pas être bon.
j'ai envie de pleurer

Ah ok donc t'es sûr que ton problème vient pas du fait que les messages que tu récupères ("Je recupère des messages") ne proviennent pas de fichiers encodés différement de ce que tu imagines ?

Après je sais pas l'ampleur de ton code, mais s'il est pas trop grand le rendre python3-compatible prend pas énormément de temps (parenthèses au print, pas de tuples dépacketés en argument de fonctions, ...)

J'ai fais pas mal d'application Python, et je t'apprends peut être rien, mais quand on lit une chaîne de caractère, il FAUT préciser l'encodage que tu lis.

Sur Python 2, toute chaîne de caractère donc l'encodage n'est pas défini est une "string".
Tu dois donc la décoder en la lisant pour le convertir en unicode.
Même chose pour écrire quelque chose dans la base, tu dois encoder l'information dans l'encodage de la base (en partant d'un unicode).

Explication :

Sous python 3, les string sont nativement en unicode (donc pas besoin de faire un u"chaine".

Bref, es tu sur du type d'encodage de ton fichier d'origine? Je sais que moi j'ai bloqué pas mal de temps jusqu'à m’apercevoir que sous Windows, l'encodage de la console était un truc genre cp85.

Personnellement j'ai un soucis, au début de mes codes (sous console) je précise l'encodage :

1. -*- coding:latin-1 -* (je suis sous windows) mais ça me fait des caractères illisibles à la place des accents, de même pour utf-8