Видео аннотации для обучения нейронной сети

Question

Я хочу обучить нейронную сеть распознавать некоторые объекты в видео на основе их формы, цвета и т. Д. Чтобы обучить свой NN, я хочу, чтобы он работал с некоторым обучающим видео (MP4, которые я снимал) так, чтобыЯ могу учиться под присмотром.Существуют ли какие-либо инструменты, которые я могу использовать для покадрового рисования видео, чтобы я мог передать его в NN?

Притворимся, что у нас есть пример, в котором я хочу, чтобы NN распознал красныйтреугольники.Я хочу пройтись по кадрам и «выделить» области, которые имеют красные треугольники, чтобы NN мог сканировать кадр, сказать да / нет, есть красный треугольник, и он здесь, и проверить, правильно ли он.

Любые предложения приветствуются.

mj

Answer 1

Изменение исходного изображения научит сеть распознавать ваши аннотации, а не обязательно желаемый объект распознавания. Вероятно, это не лучший подход, если вы хотите, чтобы сеть в конечном итоге обрабатывала аннотированные изображения.

Я бы создал отдельный файл, содержащий нужные выходные данные, которые должны быть извлечены из каждого кадра, проиндексированы по временному коду или номеру кадра. Если вы просто обнаруживаете присутствие определенного объекта, было бы достаточно просто перечислить все кадры, которые содержат объект, или, что еще лучше, запустить и остановить кадры, чтобы определить, когда он виден. Стандартные инструменты титров должны хорошо работать для этой задачи.

Хотя на самом деле это не вопрос программирования. Может быть более уместным в SuperUser.