Для любого линейного фильтра (свертка) вы можете получить тот же результат, используя вычисления в пространственной и частотной областях. Свертка с большим ядром обычно более эффективно реализовать путем умножения в частотной области. Свертка с небольшим ядром, вероятно, более эффективна для реализации непосредственно в пространственной области, если только у одного из них нет уже имеющегося представления частотной области (FFT) изображения.
Для любого нелинейного фильтр (все остальное) вы не можете использовать частотную область вообще. Фурье-анализ ограничен линейными системами.