Заряжается ли Google BigQuery временем обработки?

Question

Итак, это вопрос «реального времени». Я запустил запрос, и в настоящее время он занимает почти 12 тысяч секунд, но он сказал мне This query will process 239.3 GB when run. Заряжается ли BQ временем помимо обработанных данных? Должен ли я остановить это сейчас?

Answer 1

Я предполагаю, что вы используете модель ценообразования по требованию - оплата выставляется на основе количества обработанных байтов, а время обработки не задействовано

• BigQuery использует столбчатую структуру данных. Оплата производится в соответствии с общими данными, обработанными в выбранных вами столбцах, а общие данные по столбцам рассчитываются на основе типов данных в столбце. Для получения дополнительной информации о том, как рассчитывается размер данных, см. Расчет размера данных.

• Вы не платите за запросы, которые возвращают ошибку, или за запросы, которые получают результаты из кэша.

• Сборы округляются до ближайшего МБ, при этом на каждую таблицу, на которую ссылается запрос, обрабатывается минимум 10 МБ данных, а на запрос - минимум 10 МБ. Отмена текущего задания запроса может повлечь за собой оплату до полной стоимости запроса, если ему разрешено выполнить его до конца.

• Когда вы выполняете запрос, с вас взимается плата в соответствии с данными, обработанными в выбранных вами столбцах, даже если вы установили явное значение LIMIT для результатов.

Подробнее на Цены BigQuery

Answer 2

За запросы по требованию взимается плата за объем данных, обработанных механизмом BigQuery, и только за дорогостоящие запросы взимается дополнительная плата за сложность (которая может проявиться в увеличении времени запроса).

количество обработанных данных отражается как totalBytesProcessed. А также totalBytesBilled, что то же самое для обычных запросов. Для сложных / дорогих запросов с вас взимается дополнительная плата за сложность, и технически это делается, когда totalBytesBilled становится больше, чем totalBytesProcessed.

Подробнее: см. Ссылку