Я копирую все файлы из одного кластера Hadoop в другой кластер Hadoop, используя distcp.С 1-й...
ПРИМЕЧАНИЕ. Я не хочу указывать имя очереди YARN, как в Hadoop: указать очередь пряжи для distcp...
У нас есть много заданий distcp, копирующих данные из нашего основного кластера в резервный кластер
В основном я использую команду «distcp», чтобы поместить некоторые данные в S3, довольно маленькие...
У меня есть куча данных (на S3), которые я копирую в локальную HDFS (на Amazon EMR).Сейчас я делаю...
Я пытаюсь использовать distcp для копирования сжатого файла ~ 500 МБ в HDFS, но получаю ошибку...
Я использую s3-dist-cp для копирования данных из HDFS в 2 разные папки (или клавиши), скажем,...
Я хочу загрузить несколько файлов в корзину AWS из hadoop. я имею КЛЮЧ ДЛЯ ДОСТУПА AWS, СЕКРЕТНЫЙ...
У меня есть папка (размером около 2 ТБ) в HDFS, которая была создана методом save из Apache Spark....
Я копирую данные между двумя кластерами HDFS на основе Hadoop 3.1.Из-за сетевых ограничений служба...
Каковы наилучшие подходы для переноса кластеров размером 1 ТБ из Big Insights в Cloudera. Cloudera...
Есть ли какие-либо другие возможности для мониторинга и проверки больших заданий distoop, кластера...
Я пытаюсь скопировать файлы между двумя кластерами mapr. hadoop distcp...
Я пытаюсь отправить задание distCP из приложения весенней загрузки по вызову API REST. версия...
У меня 2 кластера Hadoop от Hortonworks. Я хочу использовать команду DISTCP. Как установить...
Может кто-нибудь помочь мне с аутентификацией при переносе данных из hdfs в S3.Чтобы подключиться к...
As per distcp documentation -> If -pa is specified, DistCp preserves the permissions also...
Я настроил HDFS Connector для хранения объектов, как описано здесь: https://docs.us -phoenix-1
Как скопировать из локального кластера hadoop в удаленный общий ресурс NFS или SMB, используя...
Я пытаюсь запустить команду distcp в кластере EMR: hadoop distcp s3a://... hdfs://host/data/......