Python-клиент BigQuery отбрасывает несколько строк с помощью Streaming API - PullRequest
0 голосов
/ 03 декабря 2018

У меня около миллиона элементов данных, которые вставляются в BigQuery с использованием потокового API (функция insert_row BigQuery Python Client), но есть некоторая потеря данных, ~ 10000 элементов данных теряются при вставке.Есть ли вероятность, что BigQuery отбросит некоторые данные?Поскольку нет ошибок вставки (или каких-либо ошибок по этому вопросу).

1 Ответ

0 голосов
/ 03 декабря 2018

Я бы порекомендовал вам подать частный трекер проблем , чтобы инженеры BigQuery могли разобраться в этом.Обязательно предоставьте затронутый проект, источник данных, код, который вы используете для потоковой передачи в BigQuery, а также версию клиентской библиотеки.

...