Время выполнения шага потока данных Gcloud

Question

Я использую задание потока данных gcloud и хочу отдельное время выполнения для всех шагов в моем потоке данных, включая вложенные преобразования. Я использую потоковый поток данных и конвейер в настоящее время выглядит так:

Текущий поток данных

Может кто-нибудь предложить решение?

Answer 1

Ответ - WallTime. Вы можете получить доступ к этой информации, щелкнув одну из задач в вашем конвейере (даже вложенную). Истекшее время задания - это общее время, необходимое для выполнения задания потока данных, в то время как время стены - это суммарное время, необходимое для выполнения каждого шага назначенными работниками. См. Изображение ниже для получения более подробной информации.