Мне нужно периодически перемещать файлы из локального кластера в GCP и обратно, используя python.
Хотя hdfs
кажется мне подходящим для обнаружения структуры каталогов, я обнаружил, что она не предоставляет опцию "копирования" ( ограничения WebHDFS , насколько это возможно).как я понимаю).
Прежде чем перейти к варианту с subprocess.Open
, есть ли альтернатива (например, некоторый Python API) для копирования файлов из одного места в другое?