У меня на компьютере уже установлен Yarn (менеджер пакетов), но теперь мне нужно установить Apache...

У моей установки есть YARN, работающий с Kerberos и включенным SSL в небольшом кластере HDP 3.1 с...

Когда я отправляю свое искровое задание, оно завершается с ошибкой, указанной ниже, и я пытаюсь...

В скрипте bash я вызываю команду yarn application, чтобы текущие приложения работали на кластере...

Я пытаюсь развернуть gobblin на пряже и успешно отправить задание GobblinYarn в мой кластер. Но не...

Не удалось выполнить задание My Spark Streaming со следующим исключением Диагностика: Контейнер...

У меня есть таблица Hive, содержащая 1000 файлов в HDFS, каждый файл имеет размер около 128 МБ...

Я пытаюсь настроить Hive on Spark на одной маленькой виртуальной машине (4 ГБ ОЗУ), но не могу...

Я использую Apache Toree ядро ​​scala для Jupyter Notebook, в котором используется конфигурация...

JobManager HA очень важен для Flink и задокументирован здесь .Тем не менее, документация больше...

При вызове API YARN REST через curl, чтобы получить задания в кластере, используя: curl --negotiate...

Пожалуйста, вы можете мне помочь?После настройки искрового интерпретатора для работы в кластере...

Мне удалось запутать свою программу Word Count, и теперь я хочу получить максимальное количество...

У меня есть модель ML, использующая спарк (запускается каждые 2 часа) и еще одно задание в режиме...

Пряжа имеет два известных планировщика, Fair Scheduler и Capacity Scheduler.Грубо говоря, Capacity...

Как Hadoop по-разному устанавливает значения ресурсов для каждого контейнера? Версия Hadoop: 2...

Я хочу развернуть spark2.3.2 на Yarn, Hadoop2.7.3. Но когда я запускаю: spark-shell Всегда повышать...

Я выполняю свой запрос куста на кластере EMR, который является кластером из 25 узлов, и я...

Как определить ресурсы кластера Hadoop, использованные завершенным заданием? Наш менеджер ресурсов...

Я пытаюсь обновить нашу работу с flink 1.4.2 до 1.7.1, но я продолжаю сталкиваться с таймаутами...

Существуют ли какие-либо команды hadoop / yarn для перечисления числа картографов / редукторов /...

У меня есть идентификатор задания hadoop job_xxxx_xxxx, который уже завершен и перемещен на сервер...

Я пытаюсь запустить скрипт pyspark удаленно в AWS EMR, следуя инструкциям , предоставленным AWS

Spark on yarn mode, в кластере есть узлы, такие как nodeA-xx и nodeB-xx, есть ли какие-либо...

Я настраиваю новую среду hadoop на сервере с 2-мя машинами.Когда я запускаю dfs и пряжу и запускаю...