Я уже установил Airflow на экземпляр EC2. Мой вариант использования - перенести некоторые данные из базы данных Oracle на прем в AWS S3.
У меня есть сценарии ETL на ETL на прем-сервере. Таким образом, сервер ETL устанавливает соединение с Oracle на базе данных prem, извлекает данные и сохраняет CSV-файл на сервере ETL.
Этот файл затем передается с предварительно настроенного сервера ETL на AWS S3.
Я хочу справиться с этим с помощью Airflow.
Итак, в основном, как мне подключить Airflow, который находится на AWS, к серверу On prem ETL?
Нужен ли агент Airflow или что-то в этом роде?