Могу ли я использовать один горячий вектор для тегов именованных сущностей, чтобы соответствовать встраиванию слов, чтобы улучшить нейронный машинный перевод? - PullRequest
0 голосов
/ 31 мая 2019

Я использую функции слов, такие как дополнительный ввод для моей модели NMT.Я использовал gensim для создания встраивания с предварительной подготовкой для каждого объекта и связывал их с моими векторами встраивания слов.Итак, вопрос в том, могу ли я использовать именованные теги сущностей в качестве слова и объединить именованный тег сущности одним горячим вектором с вектором встраивания слов?Основная идея взята из этой бумаги

Пример:

вектор встраивания слов: [1,2,3,4]

тег pos: [5, 6,7]

тег именованного объекта: [0,1,0]

=> окончательный вектор внедрения: [1,2,3,4,5,6,7,0, 1,0]

...