Bigquery - как вставить данные во вложенную таблицу

Question

Я пытаюсь преднамеренно вставить одну фиктивную запись с полными данными схемы в таблицу bigquery GA360.

Один из способов, которым я это выяснил, - это "ВСТАВИТЬ" все поля:

INSERT INTO <project.dataset.table> (visitorId,visitStartTime,date,totals,customDimension.......)
VALUES ( 1234, 12345, 20200101, ( 1,2,3,4,5,6,7,8,9,10,11,12,13),[(1,"asd"),....].....)

Я сдался, когда столкнулся с полем «попадания», которое имеет сложную вложенную структуру.

Есть ли другой способ (например, что-то, что я могу себе представить, это кодирование с помощью клиентского API с использованием файла схемы таблицы JSON) или Кто-нибудь, кто преуспел с DDL?

Answer 1

Как мне решить эту проблему:

1. Получить образец как JSON объект:

SELECT TO_JSON_STRING(a)
FROM `bigquery-public-data.google_analytics_sample.ga_sessions_20170801` a
LIMIT 1

Сохраните эту длинную строку JSON в файл.

Измените этот файл, сколько хотите.

Создайте новую таблицу для вставки этого файла:

CREATE TABLE `temp.analy` AS
SELECT *
FROM `bigquery-public-data.google_analytics_sample.ga_sessions_20170801` 
LIMIT 0

Вставьте файл с измененными вручную значениями:

bq load --source_format=NEWLINE_DELIMITED_JSON temp.analy my.json

или

5b. Создайте федеративную таблицу, чтобы вы могли

INSERT INTO 'table'
SELECT * 
FROM `federated_table_that_reads_the_json_file`