Я недавно установил hadoop 3.1.1 на свой компьютер в режиме одного кластера. После этого выполните...
Есть ли параметр конфигурации spark, который мы можем передать при отправке заданий через...
заранее спасибо за помощь! когда я запускаю% HADOOP_HOME% \ sbin \ start-dfs.cmd, он работает тогда...
Я попробовал репозиторий Maven следующим образом: <dependency> <groupId>org.apache
В настоящее время у меня есть рабочая реализация кода для отправки приложения в Yarn с...
для моей магистерской диссертации по информатике мне удалось реализовать исчисление из 4 профилей...
В моем кластере Hadoop каждый узел Ubuntu имеет 2 сетевых интерфейса (1 общедоступный, 1 локальный)
В нашем кластере много очередей.мы используем планировщик емкости.Одна из наших очередей имеет...
Мой вопрос больше связан с реальным кодом.Я работаю над Hadoop 2.7.7. Кажется, я понимаю, что после...
Конфигурация выполнена для запуска задания mapreduce в кластерном режиме поверх пряжи, но оно...
AFAIK, YARN RM запускает мастер-ключи, используемые для периодической генерации AMRMToken (по...
В моей работе с искрой используется только 32 Vcores из 127.Пожалуйста, обратитесь к изображению...
У нас есть кластер с Hadoop и YARN на AWS EMR с одним ядром и одним мастером, каждый с 4 vCores, 32...
Я запускаю искровое задание с использованием пряжи, и мой код написан на Java, теперь я хочу...
У меня есть скрипт оболочки с командой spark-submit для запуска с использованием действия оболочки...
Добрый день. Я включил Kerberos в своем кластере HDP.Я пытаюсь получить доступ к активной ссылке UI...
Я новичок в командах администратора менеджера ресурсов yarn, я знаю, как проверить состояние...
Я работаю на Flink в Yarn. Из-за проблем с подключением кластер потерял 5 узлов.На тот момент мы...
Чтобы сузить проблему, я удалил другие зависимости класса, и у меня есть этот чистый код: object...
Я пытаюсь запустить два приложения spark в одном кластере.YARN - это используемый менеджер ресурсов
Я получаю эту ошибку при запуске примера приложения mapreduce в пряже и задаюсь вопросом, может ли...
Я хочу проанализировать отдельные элементы внутреннего объекта JSON для сборки / загрузки в базу...
Я пытаюсь создать кластер EMR (через командную строку) и дать ему файл загрузочных действий и файл...
Я пытаюсь запустить контейнер LLAP, и я вижу следующую ошибку в журнале контейнера Log Type:...
Я экспериментирую с запуском Spark в режиме кластера пряжи (v2.3.0).Мы традиционно работали в...