H2o - разница между AU C, возвращаемым таблицей max_criteria_and_metric_scores, и Au c, возвращаемым объектом H2o Model - PullRequest
Новая
       9

H2o - разница между AU C, возвращаемым таблицей max_criteria_and_metric_scores, и Au c, возвращаемым объектом H2o Model

0 голосов
/ 19 апреля 2020

В validation_metrics, возвращенном моделью H20, я вижу другой показатель AU C, чем то, что я получаю из таблицы max_criteria_and_metric_scores. Ниже приведен вывод R. Это подтверждение AU C, возвращаемое (0,85) 

> model@model$validation_metrics@metrics$AUC
[1] 0.859841

MaxCriteria output. 

> model@model$validation_metrics@metrics$max_criteria_and_metric_scores[4,]
  Maximum Metrics: Maximum metrics at their respective thresholds
          metric threshold    value idx
   4 max accuracy  0.494246 0.831600 137

В max_criteria точность таблицы ниже на 0,83. Похоже, что 0,85 от другого порога. Если да, то при каком пороговом значении метри c выбирается моделью.

...