Вопросы с тегом s3distcp - PullRequest

Вопросы с тегом s3distcp

0 голосов
0 ответов

У меня есть файлы деталей с каталогом s3, как показано ниже: part-00001.gz part-09999.gz Мне нужно...

Parijat Bose / 09 июля 2019
0 голосов
2 ответов

Я пытаюсь скопировать данные из кластера EMR в S3 с помощью s3-distcp.Могу ли я указать число...

Kshitij Kohli / 05 июля 2019
0 голосов
0 ответов

Я пытаюсь использовать S3DistCp (s3-dist-cp) для копирования нескольких сжатых файлов VCF из s3 в...

Martin Klosi / 10 апреля 2019
1 голос
1 ответ

В EMR я использую s3-dist-cp --groupBy, чтобы присвоить файлу случайное значение fileName в папке с...

dreddy / 07 апреля 2019
0 голосов
1 ответ

Я пытаюсь скопировать данные из одного кластера hdfs в другой, используя команду distcp. Ниже...

Jibinjks / 27 февраля 2019
0 голосов
2 ответов

У меня есть файл jar, который предоставляется для spark-submit.With в методе в jar.Я пытаюсь...

Ram / 21 декабря 2018
0 голосов
0 ответов

Я использую s3-dist-cp для копирования данных из HDFS в 2 разные папки (или клавиши), скажем,...

Waqar Ahmed / 26 ноября 2018
0 голосов
1 ответ

Я хочу загрузить несколько файлов в корзину AWS из hadoop. я имею КЛЮЧ ДЛЯ ДОСТУПА AWS, СЕКРЕТНЫЙ...

akr / 09 ноября 2018
0 голосов
0 ответов

У меня есть куча маленьких json-файлов, и я хочу переместить их в больший набор файлов.Когда я...

mark / 19 сентября 2018
0 голосов
1 ответ

Может кто-нибудь помочь мне с аутентификацией при переносе данных из hdfs в S3.Чтобы подключиться к...

Manu Batham / 11 сентября 2018
0 голосов
1 ответ

У меня есть требование, где мне нужно скопировать файлы из одного сегмента S3 в другой сегмент S3....

Kishor Baindoor / 03 июля 2018
0 голосов
1 ответ

Я копирую 800 avro файлов , размер около 136 МБ , из HDFS в S3 на EMR кластер , но я получаю это...

Waqar Ahmed / 26 июня 2018
0 голосов
1 ответ

Я использую s3distcp, чтобы скопировать набор данных 500 ГБ в мой кластер EMR.Это большой кластер...

Gareth Rogers / 19 мая 2018
0 голосов
1 ответ

Попытка выяснить, как экспортировать данные из HDFS, которые выводятся заданием Apache Spark...

Laurynas Stašys / 02 мая 2018
Для получения более полной информации посмотрите в списке вопросов или в популярных тегах.
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...