Потоковое BigQuery и разделы: когда действительно оценивается _PARTITIONTIME?

Question

_PARTITIONTIME представляет время (усеченное до дня), когда строка вставляется в BigQuery.

Однако, если присмотреться к механизму потоковой передачи (https://cloud.google.com/blog/products/gcp/life-of-a-bigquery-streaming-insert), мы можем увидеть 3 разных «времени вставки» при вставке строки в BigQuery:

• время, когда строка получена «Потоковыми рабочими»
• время сохранения строки в «Потоковом буфере»
• время, когда строка извлекается рабочими, которые хранят ее в конечном хранилище (конденсаторе).

Кто-нибудь знает, какой из этих 3 моментов соответствует _PARTITIONTIME?

Answer 1

Когда строка все еще находится в буфере потоковой передачи, _PARTITIONTIME для этой строки является нулевым; после извлечения строки время извлечения является _PARTITIONTIME для этой строки. Исключением является то, что, когда строка напрямую передается в раздел, «таблица $ 20180101». В этом случае _PARTITIONTIME всегда равен «2018-01-01».