Пакетное тестирование показывает ложные негативы в LUIS UI - PullRequest
0 голосов
/ 25 августа 2018

Я работаю над улучшением точности бота и использую панель пакетного тестирования.У меня около 1000 тестов, в которых я участвовал в 9 различных целях.1 неделю назад все работало просто отлично, я заставил их всех работать, и я видел, что 100% проходили через доску.

Когда я пришел на работу в понедельник, я запустил панель пакетного тестирования (без каких-либо изменений), и я видел все виды сбоев.Это показывало, что 6/9 партий терпели неудачу с некоторыми имеющими массовые сбои, возможно, 100/300 прохождения.

Сначала я взбесился, потому что собирался отнести это к продукту, и я не мог понять, что произошло.

Однако, когда я нажал «увидеть результаты», следующая сцена показала, чтодействительно, все испытания все еще проходили.Это просто первая панель, которая отображает неверную информацию о том, что проходит / не проходит.

Похоже, что здесь есть какая-то ошибка, я проверил ее на другой модели, и у меня возникла та же проблема.ложных сообщений об ошибках.

...