Что будет с проблемой Caption Image в компьютерном зрении, если обученная модель обнаружит какой-либо объект, который никогда не встречается в наборе данных? - PullRequest
0 голосов
/ 03 сентября 2018

Я только начинаю сосредотачиваться на исследовании заголовка изображения, которое является поддоменом CV. Как мы все знаем, как и в случае с другим процессом глубокого обучения, вы должны тренировать модель на основе обучающего набора и как только модель готова, вы можете использовать ее. Итак, у меня есть вопрос в проблеме подписи к изображению, что произойдет, если обученная модель обнаружит какой-либо объект, который никогда не встречается в наборе данных? Спасибо за ваши ответы!

1 Ответ

0 голосов
/ 03 сентября 2018

Скорее всего, произойдет 1 из 2:

  1. Объект классифицируется как нечто в категориях набора данных, и генератор текста подберет этот класс для построения предложения.

  2. Объект не распознан, а остальная часть кадра используется для создания предложения.

Это зависит от того, насколько тесно фактический класс связан со всем, что встроено в набор данных. Первый вариант все еще более вероятен, если объект доминирует над областью в пределах кадра. Вы можете установить ручной порог, который отбрасывает информацию о классе ниже определенной достоверности.

...