Одно горячее кодирование категории 1 миллион - PullRequest
0 голосов
/ 13 ноября 2018

Для языковой модели я должен предсказать слово для данной последовательности слов. Мой словарь содержит 1 миллион слов. Я пытаюсь предсказать слова из этого. Я попытался использовать одно горячее кодирование, используя keras (to_categorical) для предсказанных слов. Но для такого большого словаря я получаю ошибку памяти в python. Есть ли способ преодолеть это или мой подход неверен?

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...