У меня есть задача поместить приложение фляги в докер-контейнер, после чего в зависимости от запроса пользователя приложение фляги должно запустить искра на хост-компьютере и получить свой рабочий статус от хоста и отобразить его пользователю.
Я знаю, что докер можно использовать изолированно, но не уверен, как я могу выполнить команды spark на хост-машине (экземпляр aws с linux).Может кто-нибудь, пожалуйста, помогите мне здесь.у меня вопрос 1. какая конфигурация в докере позволит мне выполнить команду на хост-машине.2. Как получить статус обратно в контейнер с заданием spark.
это для экземпляра aws с linux и pyspark 2.4.3, я пытался запустить докер, но не уверен, как действовать дальшездесь
из-за проблем с ip, я не могу предоставить код здесь
ожидаемые результаты, когда пользователь предоставляет запрос, колба в докере должна запустить задание запуска на хост-машине, когда пользователь хочет знатьподробности о работе колбы должны давать результаты обратно на хост-машине (экземпляр aws)