Отношение BigQuery к другой базе данных - PullRequest
0 голосов
/ 16 октября 2018

Меня попросили перенести огромные данные из BigQuery в Firestore.Однако после поиска в интернете я понял, что редко обсуждается вопрос о переносе данных из BigQuery в любую другую базу данных.Из результатов поиска большинство из них касается перемещения данных из любого источника в BigQuery.Даже в шаблонах Google Dataflow существуют только шаблоны xxx для BigQuery, но конвейер BigQuery к xxx не найден.

Исходя из того, что я получаю, мы рассмотрим пример, например, после того, как мы получаем много данных из Google Analytic в BigQuery, мы выполняем объединения и некоторую фильтрацию, чтобы получить некоторые полезные идеи, которые можноподано клиенту позже.Для быстрого получения результата вместо BigQuery мы перемещаем данные в Firestore, чтобы они могли быстрее выполнять чтение для большого количества пользователей.Это правильный подход?

1 Ответ

0 голосов
/ 17 октября 2018

На данный момент ваша лучшая ставка - это, вероятно, просто экспорт ваших данных в файл в облачном хранилище, а затем импорт этого файла в облачное хранилище пожаров.

Весь процесс может быть записан в сценарии, поэтому можно автоматизировать его и планировать в соответствии с вашими потребностями.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...