Похоже, что Giraph Stas записываются в журнал только с использованием map-Reduce (снимок giraph-1.3

Если кто-то отправляет новые задания в кластер Apache YARN, на странице состояния обычно...

Я запускаю приложение Flink через YARN на Amazon EMR с одним ведущим и одним ведомым. Я пытаюсь...

как всем известно, сердцебиение - это сигнал, отправляемый периодически для указания нормальной...

Я включил агрегирование журналов пряжи, используя Spark на Cloudera, но когда не удалось выполнить...

На самом деле, я запускаю искровое потоковое приложение на EMR, я установил yarn

У меня есть кластер с 1 ведущим и 4 подчиненными. Вот мой конфиг: nodemanager yarn.nodemanager

Я начинаю flink （bin / start-cluster.sh） на одном компьютере и отправляю задание через...

Я успешно развернул поток в YARN, созданный с использованием SCDF, который выглядит примерно так:...

В настоящее время у меня работает спарк 2.x с пряжей. AFAIK, spark 2.x использует log4j 1.x в...

Я сохраняю фрейм данных в s3, используя блокнот zeppelin. df=spark.sql("select * from...

Я использую кластер ecoop hadoop, который состоит из 20 компьютеров c3.8xlarge, каждая из которых...

Я настраиваю свой кластер Hadoop для тестирования и помещаю все в 3 контейнера Docker. Мой файл...

У меня установлен JAVA 8 на моем искровом кластере. У моего приложения есть модуль, который зависит...

Я записываю данные в таблицу в Hive из другой таблицы Hive размером 6,29 ГБ (размер блока: 128 МБ),...

Я установил hadoop 2.8.4 на моей машине, отправьте и запустите mapreduce ok. Единственная проблема...

Прежде всего я пытаюсь развернуть приложение Spark Java на кластере пряжи с помощью следующей...

Когда я запускаю искровое задание на кластере пряжи, приложения выполняются в очереди. Итак, как я...

Я использую оператор потока воздуха для запуска задания отправки искры. Работа искры принимает...

Когда я даю Spark-Shell или Spark-shell -master пряжу, я не нахожу отслеживающий URL на консоли....

Я настроил Hadoop на AWS несколько дней назад и провел тест на количество слов. Но задача не...

Работа по уменьшению карты порождает несколько картографов и работает в Yarn. Как запустить эти...

У меня есть задание на импорт во внешнюю таблицу улья (Hbase). Поскольку мои данные слишком велики,...

Я использую giraph-1.3, построенный с использованием профиля пряжи. Для запуска я настроил 1...

Интересно, как работает честный планировщик с Spark (структурированным) Streaming при работе на...