Я предполагаю, что вы говорите о процессе веб-сервера Airflow, поскольку вы не уточнили, но вы должны иметь возможность просто запустить несколько процессов и просто установить переменную среды AIRFLOW__WEBSERVER__WEB_SERVER_PORT для каждого процесса соответственно.