Одним из способов сделать это может быть добавление шага очистки как части "POST BUILD ACTION (execute shell)".
Когда вы прервете сборку (например, нажмите один раз на метку x), Jenkins все равно будет запускать действия после сборки.
Jenkins прервет действие после сборки, если вы попытаетесь принудительно прекратить процесс (нажмите кнопку «x» несколько раз)
Для этого вам может потребоваться изменить / разбить ваши скрипты