Мониторинг конвейера потока данных: почему система задерживает газ примерно на 4 секунды, даже если в конвейер не было добавлено ни одного элемента? - PullRequest
0 голосов
/ 15 мая 2019

Я запустил задание Dataflow, содержащее конвейер потоковой передачи, запускаемый сообщениями PubSub, и создал несколько диаграмм, используя службу Stackdriver, используя показатели, уже определенные в экосистеме GCP, такие как задержка системы Dataflow, показанная на рисунке ниже.

System lag of my Dataflow job

В теме PubSub еще не было опубликовано ни одного сообщения PubSub.С момента определения System lag, как здесь сообщается, https://cloud.google.com/monitoring/api/metrics_gcp, выглядит следующим образом:

Текущая максимальная продолжительность, в течение которой элемент данных ожидает обработки, в секундах.

почему системная задержка не равна нулю, учитывая, что ни один элемент не проходит через конвейер?

...