Go вернитесь в папку, в которой вы запустили docker -compose и выполните следующую команду:
docker-compose exec superset bash -c 'export FLASK_APP=superset && flask fab create-admin'
(вам также может понадобиться sudo)
После Вы создаете нового пользователя-администратора (с другими учетными данными!), вы можете go в профиль старого администратора, установить его как неактивный и войти в систему с новыми учетными данными.