Я полагаю, что в некоторых случаях слой свертки использует отступы или удаление пикселей, чтобы применить данный шаг. Так что думай об этом так. Каждый ваш шаг стоит две единицы, и есть мост, который вы должны пересечь, но вы можете наступить только на каждое нечетное число. Естественно, вы попытаетесь сократить мост или начать с шага позади.
Если вам нужно более математическое объяснение. Здесь - хороший источник информации обо всем этом процессе свертки.