Я сравниваю два файла A & B и извлекаю столбцы из A, которых нет в B, и добавляю их в B. Когда...

Сконфигурированный сервер livy на Kerberized CDH 5.10.x и нормально работающий на порту 8998, но...

У меня есть около 1500 файлов XML в HDFS, каждый из них составляет около 2-3 ГБ.Мне нужно написать...

Мой исполняемый файл: package hadoop; import java.util.*; import java.io.IOException; import java

Я работаю на Flink в Yarn. Из-за проблем с подключением кластер потерял 5 узлов.На тот момент мы...

Я установил SpatialHadoop в кластере с настроенным Hadoop.Я запустил команду: shadoop generate test

У меня плоские файлы доставляются в hdfs.Общая структура файлов выглядит следующим образом:...

У меня есть следующие файлы в HDFS - abc_20181203-010000 cde_20181203-020000 fgh_20181203-030000...

Как и в Hadoop, если задача не выполняется, она назначается другому узлу. Как переназначить задачу...

Я использую честный планировщик в Hadoop 1.2, если я обновлю версию Hadoop, останется ли тот же...

Я сослался на эту ссылку и добавил spark.sql.catalogImplementation = улей добавлен spark-default

Ошибка экспорта sqoop.Я искал много ссылок, но не смог найти решение. enter code here18/12/02...

Мне нужно написать скрипт bash, который поможет мне найти и удалить все файлы нулевого байта в hdfs

Я создал секционированную таблицу Hive, используя следующий запрос CREATE EXTERNAL TABLE...

Я импортирую TableInputFormat в своем коде как: import org.apache.hadoop.hbase.mapreduce

Я использую HDFS с версией hadoop-2.6.0-cdh5.15.0 с 3 датодами. Очень часто наблюдается, что DFS...

Чтобы сузить проблему, я удалил другие зависимости класса, и у меня есть этот чистый код: object...

сбой namenode два раза без сообщения, я не могу найти проблему в журнале. первый сбой: 2018-11-27...

Я создаю кластер, используя 4 экземпляра в OpenStack.Я пытаюсь скопировать ключ от мастера к...

Я молодой разработчик, я относительно новичок в продуктах Google Cloud Platform, и в частности в...

Мы строим инфраструктуру БД на основе систем Hadoop.Мы будем платить поставщику, чтобы сделать это,...

Я получаю неожиданный вывод после запуска команды hdfs namenode -format , показывающей переменную...

Я инженер по обработке данных с опытом проектирования, создания и интеграции данных и процессов ELT

Я читаю Интернет-книгу Яцека Ласковского об Apache Spark , а в отношении разбиения он утверждает,...

Я пытался запустить Spark на Hadoop для запуска приложений, но все выглядит нормально, и я получаю...