Какие / Где используются последние пороговые значения для оценки новых прогнозов во время развертывания в DAI?

Question

У меня проблема с бинарной классификацией, я проверил ее через DAI, и мне дали тест AUC.Где найти порог вероятности, который используется во время развертывания для оценки новых строк данных?

Примером может быть порог в 0,50;IE целевая переменная> .50 получает 1, а цель <.50 получает 0 (или наоборот) во время принятия решения.<strong> Мне нужен точный порог за пределами 4-значного каскадного числа, которое отображается в графическом интерфейсе при перемещении по кривой AUC. На рисунках ниже я сопоставил пороги и не могу получить те же матрицы путаницыс одинаковым порогом.Обратите внимание, что ложные срабатывания очень минимально отличаются.

Порог DAI @ .0301 Порог

Sklearn Confusion Matrix @ .0301 Порог

ОБНОВЛЕННЫЙ ОТВЕТ : Загрузите вкладку «Сводка экспериментов» после завершения эксперимента на DAI.В zip-файле вы найдете ensemble_roc_test.json , который дает пороговые значения до 10 цифр.

Answer 1

Прогнозы AI без водителя возвращают «баллы», поэтому пороговое значение не применяется к прогнозу, и пользователь сам может использовать счет.Рекомендуемый порог для оптимизации различных метрик можно увидеть на кривой эксперимента на странице эксперимента.Например, на скриншоте ниже мышь находится над кругом «Лучший F1», чтобы получить сводку, включающую порог:

Answer 2

ОБНОВЛЕННЫЙ ОТВЕТ : Загрузите вкладку «Сводка экспериментов» после завершения эксперимента на DAI.В zip-файле вы найдете ensemble_roc_test.json , который дает пороговые значения до 10 цифр.