Можем ли мы заменить средний пул на успехи и понижение?

Question

https://arxiv.org/pdf/1412.6806.pdf Стремление к простоте говорит о том, как мы могли бы заменить максимальное объединение дополнительным сверточным слоем и шагом r = 2. Но можно ли добиться этого с помощью среднего объединения вместо этого?

Answer 1

Суть статьи в том, чтобы показать, что операция объединения может быть изучена, а не жестко закодирована:

Мы подчеркиваем, что эта замена также может рассматриваться как изучение операции объединения, а не исправление it

Несмотря на то, что они только экспериментировали с максимальным пулом, заключение кажется переносимым на другие пулы, такие как среднее пул, поскольку замещающий сверточный слой, вероятно, изучит это преобразование.

Дело в том, что простая свертка с шагом 2 может заменить любую операцию объединения.