Вы можете использовать pysftp для загрузки ваших данных и сохранения их в корзину GCS вне вашего конвейера лучей.А затем запустите лучевой конвейер, указывающий ведро GCS.Так как ваш рабочий процесс в партии по своей природе, так что будет делать.В луче нет разъема FTP.