Как связать юникодную ссылку в HTML

Question

Я ползаю в Интернете.Я получаю следующий HTML-код

<a href="http://&#65346;&#65345;&#65348;&#65294;&#65347;&#65359;&#65357;">Bad URL</a>

Это строка*http://bad.com Мне нужно сравнить собранные URL-адреса со списком URL-адресов из белого списка.Как мне конвертировать http://ｂａｄ．ｃｏｍ в http://bad.com, используя Python?Можно ли сравнить два URL-адреса?

Заменяют ли браузеры "смешанные" символы?

Answer 1

Вы можете использовать unicodedata:

import unicodedata

link = 'http://ｂａｄ．ｃｏｍ'
normalized = unicodedata.normalize('NFKC', link)

Что такое 'NFKC' вы можете найти в официальных документах .