Я бы хотел оценить свой скрипт ruta, используя среду тестирования аннотаций, предоставляемую плагином uima ruta для eclipse. Я построил аннотированный вручную корпус. Некоторые аннотации оцениваются как истинные положительные, а также ложные срабатывания, что не должно быть возможным по определению.
Я уже проверил, есть ли небольшие различия между истинными положительными и ложными положительными результатами, но на самом деле они идентичны (одинаковые смещения).
В качестве опции я выбрал "частичное совпадение".
Когда я проверяю results.xmi, где я могу видеть истинные положительные, ложные положительные и ложные отрицательные значения в качестве аннотаций, эти аннотации имеют функцию ошибки; но дополнительной информации нет.
Истинные положительные и ложные положительные значения как аннотации в результате. Xmi
Аннотации, о которых идет речь, должны быть действительно положительными.
Редактировать: Я также заметил, что когда я указываю только один тип (то есть один тип аннотации) для оценки, все выглядит так, как должно быть. Проблема возникает, только если предполагается, что более одного типа должно быть оценено.