У меня есть вопрос по поводу мера надежности межаннотатора альфа Криппендорфа для непрерывного или унифицированного текста. Мера подробно объясняется в статье .
У меня есть тексты и 2 кодировщика / аннотатора. Задача аннотаторов состоит в том, чтобы идентифицировать именные фразы в этих текстах, используя принцип максимума; то есть все элементы, которые изменяют существительное головы, должны быть помечены в одном и том же интервале фразы существительного. Конечно, между этими двумя кодерами существуют разногласия, и мне нужно измерить надежность.
Я прочитал статью Криппендорфа, и мой вопрос: как вычислить альфа в случае на рисунке: одна единица по первому аннотатору отображается в несколько отдельных единиц с пробелами в выходных данных второго аннотатора? Этот случай распространяет множество разногласий в последующих единицах.
В статье все приведенные примеры соответствуют один к одному, но имеют разные начала и длины, но не похожи на мой пример: /
Верны ли мои вычисления (на рисунке)?
