Как отслеживать количество записей, загруженных в таблицу BQ при использовании потоковой передачи больших запросов? - PullRequest
0 голосов
/ 26 марта 2019

Мы пытаемся вставить данные в большие запросы (потоковые) с использованием потока данных.Есть ли способ, где мы можем проверить количество записей, вставленных в Bigquery?Нам нужны эти данные для сверки.

Ответы [ 2 ]

1 голос
/ 29 марта 2019

Вы также можете изучить «Добавленные элементы», нажав на шаг записи в bigquery в Интерфейсе потока данных .

1 голос
/ 26 марта 2019

Добавьте в ваш поток данных шаг, который вызывает Google API Tables.get ИЛИ выполните этот запрос до и после потока (оба одинаково хороши).

select row_count, table_id from `dataset.__TABLES__` where table_id = 'audit'

В качестве примеразапрос возвращает это

enter image description here

...