Берт, маскировка текста / прогнозирование текста? - PullRequest
0 голосов
/ 26 апреля 2020

Я спрашиваю про маскировку BERT Span. На самом деле проблема, которую я пытаюсь решить, заключается в следующем: я беру предложение, и я собираюсь замаскировать слово или интервал текста (непрерывный кусок слова), и я пытаюсь получить предложение для маскированного смежного фрагмента слов с использованием bert. Однако предложения могут быть словом или смежным куском слов, которые не будут иметь ту же длину последовательности, что и смежный маску смежных слов. Например, если я маскирую слово pizza в предложении Я ем пиццу с друзьями, можно ли заполнить пробел вкусной едой или любым другим смежным куском слов, то же самое, если я маскирую смежный кусок слова, можно ли заменить его одним словом (тот же пример, но замена вкусной еды пиццей). Есть ли бумага, которая рассматривает эту проблему?

...