Как с уверенностью оценить классификатор изображений ML

Question

Предположим, у меня есть модель, которая классифицирует изображения в одну из n категорий.Я знаю, как рассчитать точность и чувствительность, основываясь только на метке вывода.Однако я хочу быть более конкретным.Как я могу также включить процент достоверности, который получается с каждым выходом ???

Answer 1

Вы можете использовать начальную загрузку , чтобы получить доверительный интервал вашей модели в наборе данных. Полная демонстрация здесь . Если вы хотите получить его для отдельной выборки, вы можете определить другой список, например, список stat, и вместо этого сохранить прогнозируемые вероятности для этого человека.