Двоичный выход для обнаружения изменений с использованием сверточных нейронных сетей - PullRequest
0 голосов
/ 14 февраля 2020

Я не совсем уверен, что это правильное место, чтобы задать такой вопрос. Я ищу рекомендации по решению конкретной проблемы c.

Я изо всех сил пытаюсь найти решение для моего университетского проекта. Допустим, у меня есть 2 изображения, сделанные в одном месте, но в разное время. Мне нужно построить модель, которая обнаружит, есть ли какие-либо изменения между этими двумя изображениями.

Это как-то похоже на проблемы сегментации переднего плана / вычитания фона / обнаружения смены сцены, у которых было развернуто множество исследовательских работ (Для ссылка ): enter image description here

Однако масштабы этих проблем намного выше того, что я хочу сделать. Они извлекают элементы CNN из исходных изображений, а затем объединяют извлеченные элементы в выходное изображение в оттенках серого с помощью деконволюционных методов. Для меня я просто хочу извлечь объекты и в конечном итоге вывести двоичное (1 или 0) значение: 1, если есть какое-либо изменение между 2 изображениями, 0, если нет. Другими словами, я не хочу реализовывать деконволюционную часть.

У меня есть 2 проблемы:

  1. Набор данных CD2014 (а также другие соответствующие наборы данных) имеют только основные истины в формат изображений в градациях серого, а не желаемый вывод (двоичный формат 1/0).
  2. Кроме того, поскольку моя проблема отличается от этих работ, я не могу найти подходящую модель для использования, я склонен использовать VGG-16, но нет никаких доказательств того, что она будет работать в моей задаче.

Можете ли вы предложить мне какие-либо решения или материалы в этой области? Я действительно ценю любые рекомендации.

Спасибо и хорошего дня!

1 Ответ

1 голос
/ 14 февраля 2020

Есть эта бумага: https://arxiv.org/pdf/1810.09111.pdf
Это похоже на то, что вы хотите сделать!

В документе они выводят тепловую карту изменений между двумя изображениями, но вы можете просто определить, есть ли активация или определенное количество активаций для вывода вашей двоичной классификации.

Надеюсь, что это может помочь вам!

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...