BigQuery извлекает данные из sftp - PullRequest
0 голосов
/ 20 ноября 2018

У меня есть интернет-сервер sftp, который регулярно обновляет CSV-файлы.Есть ли в любом случае команда BigQuery для извлечения данных из этого sftp и помещения их в таблицы.В качестве альтернативы, любой API или библиотека Python, которые поддерживают это?

1 Ответ

0 голосов
/ 20 ноября 2018

Что касается BigQuery - я не знаю об интеграции с SFTP.

Вам необходимо:

  • Создать / найти скрипт, который читает из SFTP и отправляет вGCS.
  • Добавьте службу HTTPS к серверу SFTP, чтобы ваши данные можно было прочитать с помощью службы передачи GCS (https://cloud.google.com/storage-transfer/docs/)
...