Количество аннотаторов в задаче классификации текста - PullRequest
0 голосов
/ 09 мая 2019

Я пытаюсь использовать службу маркировки данных AI на платформе Google для задачи классификации текста (1000 строк будут помечены тремя метками в каждой).Имеется ли какая-либо информация об общем количестве аннотаторов (человек-этикетировщиков), которые будут выполнять задачу, о количестве аннотаторов в строке и о фактической метке, которую каждый комментатор выбрал для каждой строки, а не только о голосовании большинства при пометке этой строки?Я хочу создать модель (MACE - оценка компетенции нескольких аннотаторов), чтобы устранить смещение в задаче аннотации несколькими аннотаторами с помощью байесовского вывода.Спасибо!

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...