Импорт данных из BigQuery в SQL Server

Question

Мне нужно извлечь данные из Google BigQuery в SQL Server. Набор данных для извлечения имеет много столбцов и строк. Есть ли в SSIS большой соединитель запросов?

Answer 1

Вы также можете использовать пакет Python панды :

Для чтения из BQ :

pandas.DataFrame.read_gbq(query, project_id=None, index_col=None, col_order=None, reauth=False, verbose=None, private_key=None, dialect='legacy', **kwargs)

Отправить в SQL :

pandas.DataFrame.to_sql(name, con, schema=None, if_exists='fail', index=True, index_label=None, chunksize=None, dtype=None)

Другой способ - использовать Драйвер Simba ODBC для BiqQuery

Answer 2

Насколько я понимаю, нет встроенного решения, которое Microsoft предлагает для извлечения Google BigQuery на SQL Server через SSIS.Но есть множество сторонних расширений / инструментов, которые предоставляют эту услугу.Я не использовал их, поэтому не могу дать рекомендации, но быстрый поиск в Google предоставит вам набор расширений / инструментов, которые вы можете использовать:

Подключите Google BigQuery к SQL Server с помощьюSSIS

Распространенный документ, который я вижу во многих сообщениях на форуме блога Microsoft, - это CDATA: Источник потока данных SSIS и назначение для Google BigQuery

Это Visual Studioрасширение, которое соединяет SQL Server с живыми данными Google BigQuery через рабочие процессы SSIS.К вашему сведению ссылка на торговую площадку предназначена для ознакомительной версии расширения.