UnicodeWarning: специальные символы в Tkinter - PullRequest
Новая
       5

UnicodeWarning: специальные символы в Tkinter

5 голосов
/ 07 ноября 2011

Я написал программу на Tkinter (Python 2.7), скрэббелпере на норвежском языке, которая содержит некоторые специальные символы (æøå), что означает, что мой список слов (ordliste) содержит слова со специальными символами.

Когда я запускаю свою функцию finnord (c *), она возвращает 'cd'.Я использую entry.get(), чтобы получить слово для включения в мою функцию.

Моя проблема связана с кодировкой entry.get ().У меня есть локальное кодирование UTF-8, но я получаю UniCodeError, когда пишу какие-либо специальные символы в поле ввода и сопоставляю их со своим списком слов.

Вот мой вывод. 

Warning (from warnings module):
  File "C:\pythonprog\scrabble\feud.py", line 46
if s not in liste and s in ordliste:
UnicodeWarning: Unicode equal comparison failed to convert both arguments to Unicode -    
interpreting them as being unequal

Когда я пишу в своей оболочке: 

> ordinn.get()
u'k\xf8**e'
> ordinn.get().encode('utf-8')
'k\xc3\xb8**e'
> print ordinn.get()
kø**e
> print ordinn.get().encode('utf-8')
kø**e

Кто-нибудь знает, почему я не могу сопоставить ordinn.get () (запись) к моему списку слов?

1 Ответ

6 голосов
/ 07 ноября 2011

Я могу воспроизвести ошибку следующим образом: 

% python
Python 2.7.2+ (default, Oct  4 2011, 20:03:08) 
[GCC 4.6.1] on linux2
Type "help", "copyright", "credits" or "license" for more information.
>>> 'k\xf8**e' in [u'k\xf8**e']
__main__:1: UnicodeWarning: Unicode equal comparison failed to convert both arguments to Unicode - interpreting them as being unequal
False

Так что, возможно, s - это str object, а liste или ordliste содержит unicode, или (как указывает eryksun в комментариях) наоборот. Решение состоит в том, чтобы декодировать str object s (скорее всего, с помощью кодека utf-8), чтобы сделать их unicode.

Если это не поможет, распечатайте и опубликуйте вывод 

print(repr(s))
print(repr(liste))
print(repr(ordliste))

Я полагаю, что проблемы можно избежать путем преобразования всех строк в unicode.

  1. Когда вы генерируете ordliste из norsk.txt, используйте codecs.open('norsk.txt','r','utf-8') 

    encoding = sys.stdin.encoding
with codecs.open('norsk.txt','r','utf-8') as fil:
    ordliste = [line.rstrip(u'\n') for line in fil]

  2. Преобразовать все пользовательские данные в юникод как можно скорее: 

    def get_unicode(widget):
    streng = widget.get()
    try:
        streng = streng.decode('utf-8')
    except UnicodeEncodeError:
        pass
    return streng

Так что, возможно, попробуйте это: 

import Tkinter as tk
import tkMessageBox
import codecs
import itertools
import sys

alfabetet = (u"abcdefghijklmnopqrstuvwxyz"
             u"\N{LATIN SMALL LETTER AE}"
             u"\N{LATIN SMALL LETTER O WITH STROKE}"
             u"\N{LATIN SMALL LETTER A WITH RING ABOVE}")

encoding = sys.stdin.encoding
with codecs.open('norsk.txt','r',encoding) as fil:
    ordliste = set(line.rstrip(u'\n') for line in fil)

def get_unicode(widget):
    streng = widget.get()
    if isinstance(streng,str):
        streng = streng.decode('latin-1')
    return streng

def siord():
    alfa=lagtabell()
    try:
        streng = get_unicode(ordinn)
        ordene=finnord(streng,alfa)
        if len(ordene) == 0:
            # There are no words that match
            tkMessageBox.showinfo('Dessverre..','Det er ingen ord som passer...')
        else:
            # Done: The words that fit the pattern
            tkMessageBox.showinfo('Ferdig',
                'Ordene som passer er:\n'+ordene.encode('utf-8'))
    except Exception as err:
        # There has been a mistake .. Check your word
        print(repr(err))
        tkMessageBox.showerror('ERROR','Det har skjedd en feil.. Sjekk ordet ditt.')

def finnord(streng,alfa): 
    liste = set()
    for substitution in itertools.permutations(alfa,streng.count(u'*')):
        s = streng
        for ch in substitution:
            s = s.replace(u'*',ch,1)
        if s in ordliste:
            liste.add(s)
    liste = [streng]+list(liste)
    return u','.join(liste)+u'.'

def lagtabell():
    tinbox = get_unicode(bokstinn)
    if not tinbox.isalpha():
        alfa = alfabetet
    else:
        alfa = tinbox.lower()
    return alfa

root = tk.Tk()
root.title('FeudHjelper av Martin Skow Røed')
root.geometry('400x250+450+200')
# root.iconbitmap('data/ikon.ico')

skrift1 = tk.Label(root,
                text = '''\
Velkommen til FeudHjelper. Skriv inn de bokstavene du har, og erstatt ukjente med *.
F. eks: sl**ge
Det er kun lov til å bruke tre stjerner, altså tre ukjente bokstaver.''',
                font = ('Verdana',8), wraplength=350)
skrift1.pack(pady = 5)

ordinn = tk.StringVar(None)
tekstboks = tk.Entry(root, textvariable = ordinn)
tekstboks.pack(pady = 5)

# What letters do you have? Eg "ahneki". Leave blank here if you want all the words.
skrift2 = tk.Label(root, text = '''Hvilke bokstaver har du? F. eks "ahneki". La det være blankt her hvis du vil ha alle ordene.''',
                font = ('Verdana',8), wraplength=350)
skrift2.pack(pady = 10)

bokstinn = tk.StringVar(None)
tekstboks2 = tk.Entry(root, textvariable = bokstinn)
tekstboks2.pack()

knapp = tk.Button(text = 'Finn ord!', command = siord)
knapp.pack(pady = 10)
root.mainloop()
...