Как начать подтягивание на Airflow? - PullRequest
0 голосов
/ 15 января 2020

Я использую Воздушный поток GUI. Я помещаю их в аргументы по умолчанию:

'depends_on_past': False,  
'retries': 3,  
'cathup':True,  
'start_date': datetime(2020,1,1), 

в аргументах DAG:

   default_args=default_args,  
    start_date=datetime(2020,1,1),  
    schedule_interval='12 11 * * *'  
    catchup=True  

Но, тем не менее, когда наступает 11:12, он работает на сегодня и ничего больше. Я думаю, что он начинает заполнять с 1 января автоматически, но это не так. Что я делаю не так, или что я должен сделать, чтобы это вызвало само по себе?

1 Ответ

0 голосов
/ 16 января 2020

Да, вы правы, это должно начинаться с (2020, 1, 1). Может быть, вы могли бы установить задержку на airflow.cfg, так что это будет по умолчанию.

 Turn off scheduler catchup by setting this to False.
# Default behavior is unchanged and
# Command Line Backfills still work, but the scheduler
# will not do scheduler catchup if this is False,
# however it can be set on a per DAG basis in the
# DAG definition (catchup)

[scheduler]
catchup_by_default = True
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...