Как оценить время копирования таблицы в BigQuery? - PullRequest
0 голосов
/ 04 марта 2019

У меня есть таблица 200 терабайт, и я хочу сделать ее копию.

Как я могу рассчитать время, которое потребуется, прежде чем я действительно это сделаю?

Дополнительно:

1) Таблица разбита по времени поступления данных.

2) Я бы скопировал ее в тот же набор данных.

Любая помощь будет оценена.

Спасибо!

1 Ответ

0 голосов
/ 05 марта 2019

Фактическая оценка сложна без проведения теста производительности.Тем не менее, мы можем оценить верхнюю границу: представим, что это узкое место в одной сети 10 Гбит / с.Тогда мы ожидаем, что это займет 200 *1024* 8/10/3600 = 45,5 часов.

Поскольку я предполагаю, что BigQuery гораздо более параллелен, чем это, я бы ожидал, что 45 часов как самый длинный перевод может занять.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...