Все возможно, но самое простое, что вы можете сделать, - это создать новый образ Docker (или какой-либо другой тип машины) с более старой ОС на нем. Тогда все будет "просто работать".
Если вы действительно не хотите этого делать, вам нужно определить все зависимости, начиная с libc, у которых отсутствуют символы на более старой платформе, а затем выяснить, как избежать использования этих символов. Это, вероятно, потратит массу времени, особенно если учесть, что у вас уже есть один сборочный контейнер (создание второго не должно быть трудным).