Оценка эффективности модели BERT на документе - PullRequest
0 голосов
/ 11 апреля 2020

Я использую модель CamemBERT , предварительно подготовленную для набора данных FQuAD, для задания ответа на вопрос, и я хочу использовать эту модель для ответа на некоторые вопросы для другого домена из очень большого входного документа (более 512 токенов) .

Поскольку CamemBERT предварительно обучается на наборе данных, который не разделяет слишком много семантики с целевым документом, а также документ очень большой, поэтому мой вопрос: , если существует какой-либо автоматический c метод, который Можете помочь мне оценить производительность этой модели, ответив на вопрос из входного большого документа ?

Спасибо.

...