Облачный поток данных для запуска электронной почты при сбое - PullRequest
Новая
       79

Облачный поток данных для запуска электронной почты при сбое

0 голосов
/ 19 декабря 2018

Как при запуске задания Dataflow в облаке Google можно настроить конвейер Dataflow на отправку электронного письма при сбое (или успешном завершении)?Есть ли простой вариант, где его можно настроить внутри программы Pipeline, или какие-либо другие параметры?

1 Ответ

0 голосов
/ 14 января 2019

Один из возможных вариантов из моей практики - использовать Apache Airflow (в GCP это Cloud Composer).

Cloud Composor / Apache Airflow может отправлять вам сообщения об ошибках, когда DAG (задания) сталкиваются со сбоями.Поэтому я могу разместить свою работу в Airflow, и она отправляет электронные письма при сбоях.

Вы можете проверить [1], чтобы увидеть, удовлетворяет ли она вашим потребностям

  1. https://cloud.google.com/composer/docs/quickstart
...