Аспектно-ориентированный классификатор анализа настроений - способы возврата неизвестного из классификатора?

Question

Я создал Аспектно-ориентированный классификатор анализа настроений .

Мне нужно вернуть ответ с очень высокой уверенностью, поэтому я хочу вернуть неизвестно

в случае, если я не уверен насчет ответа, моя модель возвращает для каждой метки процент, и все 3 складываются в 1, например

i попробуйте порог в RO C точке кривой для каждой метки против всех 3, а также точность точки каждой метки

сейчас я просто возвращаю максимум между всеми 3.

прикрепленная ссылка на 1172 отмеченных примера

https://github.com/ntedgi/bert-sentiment/blob/master/decision_maker_weka.csv

спасибо

Answer 1

Вы можете установить пороговое значение и после получения вероятностей проверить, находится ли процент вероятности ниже вашего порогового значения, отметить его как неизвестное.