Нормализовать шрифт специальных символов

Question

Я создаю ботов, которым необходимо запоминать псевдонимы пользователей в виде строки, но у некоторых пользователей в псевдонимах есть специальные символы, такие как ????? ????? или Ⓑⓛⓐⓒⓚ ⓇⒶⓥⓔⓝ. Как я могу сделать, чтобы преобразовать его в обычные символы, не делая гигантский словарь со всеми шрифтами в мире?

Answer 1

Вы можете использовать unidecode.

from unidecode import unidecode
print (unidecode("????? ????? or Ⓑⓛⓐⓒⓚ ⓇⒶⓥⓔⓝ"))

Выход:

Black RAven or Black RAven

Answer 2

стандартное решение

>>> import unicodedata
>>> unicodedata.normalize('NFKD', '????? ????? ')
'Black RAven '
>>>

---

Лично я бы, наверное, сделал что-то вроде

>>> from functools import partial
>>> normalize = partial(unicodedata.normalize, 'NFKD')
>>> normalize('????? ????? ')
'Black RAven '
>>>

NFKD