В целях аналитики мне нужно загрузить в bigquery резервную копию базы данных Firebase в реальном времени (хранится в облачном хранилище Google), которая находится в json.gz и имеет размер 744 МБ (фактический размер 5,15 ГБ). Тем не менее, я получаю ошибку ниже при создании таблицы в bigquery.
Превышены ресурсы во время выполнения запроса: запрос не может быть выполнен в выделенной памяти. Пиковое использование: 165% от предела. Потребители памяти: метаданные таблицы / хранилища: 100%.
Я выполняю эту операцию с пользовательским интерфейсом Bigquery, и детали моей работы следующие:
ИД работы
Расположение США (US)
Время создания 29 августа 2018, 10:17:11
Время начала 29 августа 2018, 10:17:11
Время окончания 29 августа 2018, 10:19:50
Длительность 2 мин 38,586 сек
Таблица назначения
Исходный URI
Автоопределение схемы есть
Игнорировать неизвестные значения false
Исходный формат NEWLINE_DELIMITED_JSON
Макс плохих записей 0
Есть ли ограничения по квоте на Bigquery? Я столкнулся с рядом проблем по bigquery, но не смог найти обсуждение этой проблемы.
Пожалуйста, помогите.