Я использую пример программы WordCount для Hadoop для обработки большого набора небольших файлов /...

Я пытаюсь выполнить задание Hadoop на удаленном кластере hadoop.Ниже приведен мой код....

Довольно странный вопрос, но кто-нибудь знает, какой тип MapReduce использует в части сортировки в...

У меня есть данные в файле data / 2011/01/13/0100 / в HDFS, каждый из этих файлов содержит данные,...

Это довольно странная ситуация, но я ищу способ фильтрации, используя что-то вроде MATCHES, но по...

$hdfs dfs -rmr crawl 11/04/16 08:49:33 INFO security.Groups: Group mapping impl=org.apache.hadoop

Это может быть основной вопрос, но я не смог найти ответ на него в Google. У меня есть задание...

Сейчас я держу кластер с 12 узлами. Некоторые из них, а именно 8 узлов, имеют достаточно места на...

Я пытался создать и поддерживать файл последовательности в HDFS с использованием Java API без...

У меня есть Java-программа Map-Reduction, в которой я пытаюсь сжать только вывод Mapper, но не...

Я надеюсь запустить импорт в Hive на cron, и надеялся просто использовать "загрузить локальный путь...

Каков наилучший способ синхронизации плоского файла в HDFS с большой таблицей базы данных, в...

Я хочу перемещать файлы в HDFS с помощью API Java.Я не могу найти способ сделать это.Класс...

Мой коллега считает, что HDFS не имеет максимального размера файла, то есть, путем разбиения на...

Я пытался настроить многоузловой кластер hadoop путь Майкла-Нолла , используя два компьютера. Когда...

Я конвертирую скрипт в HDFS (Hadoop) и у меня есть этот cmd: tail -n+$indexedPlus1 $seedsDir/*url*...

Я предполагаю, что сетевой интерфейс со скоростью 100 Мбит / с станет узким местом для HDFS и...

Я пытаюсь установить Hadoop на тестовый образ Ubuntu без Cloudera. Кажется, все шло хорошо, пока я...

Я новичок в hadoop, и последние пару часов я пытался найти эту проблему в Google, но не смог найти...

При первой настройке моего naoop-кода hadoop я знаю, что мне нужно запустить bin/hadoop namenode...

Мы храним наши журналы на S3, и один из наших запросов (Pig) будет захватывать три разных типа...

У меня есть система, которую я хочу распространять, где у меня есть несколько очень больших...

Можно ли передать расположение файлов в HDFS в качестве значения моему преобразователю, чтобы я мог...

Если я копирую данные из локальной системы в HDFS, могу ли я быть уверен, что они равномерно...

Я хотел бы знать, как найти соответствие между таблицами Hive и фактическими файлами HDFS (или,...