Основной запрос о порождающих состязательных моделях

Question

Может ли Generator узнать распределение, когда noise - это конкретный вход, скажем n изображений вместо случайного шума ?Например, есть две категории изображений с метками 0 и 1 скажем 0 для кошек и 1 для собак .Можно ли выучить генератор, когда мы кормим его собакой, и он будет генерировать изображение кошки на изображении этой собаки?Этот запрос так же, как и размытие изображений, но что делать, если на этом размытом изображении нет четкого изображения, а нам просто дают случайные чистые изображения.

Answer 1

Конечно, это возможно.Это называется переносом стиля, и над этим было сделано много работ.Таким образом, вы изучаете функцию отображения между собаками и собаками.Известной работой в этом направлении является бумага CycleGAN (https://arxiv.org/pdf/1703.10593.pdf),), в которой используется постоянная потеря цикла для отображения из одного направления в другое и обратно. Это делает тренировку более стабильной, а полученные изображения ближе к исходным изображениям.