В конце %prep у вас есть возможность удалить исходные архивные файлы.Это может показаться уродливым, и это определенно не то, чего ожидает пользователь.
В конце %build у вас есть шанс удалить все промежуточные файлы.
Ничто из этого не может быть легкоавтоматизирован, поэтому вам придется настроить файл спецификации, чтобы сделать то, что вам нужно.