Скачать данные, используя большой запрос - PullRequest
0 голосов
/ 03 июля 2018

У меня очень большая таблица (около 10 миллиардов строк) и у меня есть доступ к большому запросу. Я пытался Select * from table. Он возвращает все значения, и я хочу загрузить эти данные на мой локальный компьютер. У меня нет доступа к ведрам. Я пытался использовать графический интерфейс, есть ограничение в 16000 строк. Я попытался выполнить запрос bq extract table, но ему нужно URI корзины.

Может ли кто-нибудь указать мне правильное направление для загрузки этих данных.

1 Ответ

0 голосов
/ 03 июля 2018

Правильный способ экспортировать данные из BigQuery - это экспортировать их в виде файлов в Google Cloud Storage (GCS) в рамках задания bq extract table.

URI блока означает, что вам нужно создать блок в GCS, чтобы он мог размещать выходные файлы - которые вы можете загрузить позже.

Это все должно быть объяснено на: https://cloud.google.com/bigquery/docs/exporting-data

...