Есть ли способ отследить работу между службами в stackdrive?

Question

Мы используем множество компонентов в Google Cloud, например, работа может начаться в App Engine, затем выполнить некоторую работу в Apache Airflow, а затем выполнить некоторую работу с Dataflow, которая запустит вставку BigQuery.

Есть ли способ, которым мы можем отслеживать состояние задания по всем компонентам, используя драйвер стека. Например, сообщите стекдрайверу свой идентификатор задания и запросите его.

Answer 1

Вы можете использовать расширенные фильтры журналов [1] для включения записей журнала из различных продуктов. На странице входа в систему найдите свой идентификатор задания BigQuery. Нажмите на идентификатор задания и выберите показать соответствующие записи. Откроется текстовое поле расширенного фильтра с правильным синтаксисом. Затем вы можете добавить больше запросов с ИЛИ между ними.