Я хочу выполнить семантическую сегментацию на изображениях.Для каждого изображения у меня есть маска сегментации экземпляра, так что задача семантической сегментации может быть переформулирована как простое назначение семантической метки каждому экземпляру.
Обычно люди проходятот входного изображения до семантической сегментации, а затем до сегментации экземпляра, тогда как я нахожусь в уникальном положении, имея предварительные знания о сегментации экземпляра.
При выполнении семантической сегментации я хотел бы сохранить некоторый видРазумная маркировка согласованности между пикселями одного и того же экземпляра.Обратите внимание, что количество экземпляров является переменным, то есть зависит от картинки.Я ищу любую идею о том, как подойти к этой проблеме внутренне в нейронной сети (без какой-либо последующей обработки), например, с помощью определенной потери или архитектуры.Не менее полезными будут любые домены приложений с такой же проблемой.