Кто-нибудь пробовал сделать PS-скрипт для загрузки CSV-файлов в BigQuery?

Question

Мне удалось создать скрипт Python для загрузки файлов в Bigquery, но кто-нибудь пробовал его с Powershell?

Я пытался найти вызов API для PS, но ничего не могу найти

Answer 1

Да, есть несколько способов ...

1. Использовать облачные инструменты Google для Powershell (это бета-версия)
2. Загрузка данных с помощью веб-API BigQuery
3. Загрузка данных с использованием клиентской библиотеки .Net

Вариант-1, вероятно, является лучшим выбором. Оформить заказ Add-BqTableRow:

Add-BqTableRow takes CSV, JSON, and AVRO files to import into BigQuery.

Вариант 3: вы найдете .Net примеры в основном будут на C #. Преобразуйте увиденное в Powershell.

Answer 2

Быстрый и простой загрузчик CSV-файлов для больших запросов сообщества. Вам потребуется учетная запись SVC, связанная с вашим проектом bq.

Аутентификация

gcloud auth activit-service-account SERVICE_ACCOUNT @ EMAIL>ФАЙЛ COM --key-JSON С SVC_ACCOUNT

Загрузчик файлов BigQuery CSV

bq load --source_format = CSV --skip_leading_rows = 1 DATASET.TABLE_NAME CSVFILE.CSV

Спасибо, ребята!

Хорошего дня!