Я следовал некоторым основным инструкциям по запуску Angular 5 с Rails 5 и Webpacker, но, очевидно,...
Чтобы заставить Spark (spark-2.3.0-bin-without-hadoop) работать с YARN на HDFS, я понизил Hadoop до...
Я немного запутался в том, как настроить конфигурацию Spark для рабочих нагрузок, используя YARN в...
Хотелось бы узнать, есть ли способ связать задания в Spark, поэтому выходной RDD (или другой...
Я пытаюсь настроить и запустить кластер Spark, работающий поверх YARN и использующий HDFS. Сначала...
В нашем приложении мы хотим, чтобы одновременно работал только один рабочий процесс oozie.Мы...
Как я могу получить доступ к метрикам YARN, таким как статус менеджера ресурсов и менеджера узла?...
У меня кластер SOLR 6 с поддержкой Kerberos и SSL. Когда я подключаюсь к нему с помощью тестового...
У меня есть одна ситуация, когда в случае, если определенное условие не выполняется, нет...
Можно ли одновременно отправлять и запускать задания Spark в одном кластере AWS EMR? Если да, то не...
У меня странная проблема с окружающей средой. У меня есть два окружения conda base и rnn. Когда я...
Документация Spark о подаче заявок гласит: Подключиться к кластеру YARN в режиме клиента или...
Я создал среду Hadoop как псевдо-распределенный режим (в OSX). Ниже приведены фрагменты...
Моя работа искры не выполняется из-за java.lang.OutOfMemoryError: пространство кучи Java. Я...
Мы вручную отслеживаем потоковые задания на запуск, нам нужно автоматизировать мониторинг заданий...
Текущая настройка mysql connector version-mysql-connector-java-5.1.13 sqoop version-sqoop-1.4.6...
Я использую честный планировщик вместе с пряжей spark.scheduler.pool - это локальное свойство,...
Я пытаюсь импортировать таблицу с sqoop; Я использую 4 картографа. Проблема в том, что время...
Я следовал следующему руководству: https://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.6
У меня есть 2 проекта, каждый из которых должен использовать один кластер, но я не знаю, как...
Я ищу способ убить все приложения YARN от определенного пользователя. Я знаю, что могу использовать...
(есть проблема с Apache Spark У меня есть кластер с 10 узлами (1 ведущим и 9 ведомыми), каждый узел...
Я использую dask_yarn (часть knit), чтобы запустить кластер Dask Yarn следующим образом: import...
Я настроил свой кластер (1 ведущий / 9 ведомых). Моя проблема в том, что когда я подаю заявку...
Использование структурированного потока Spark с решением Cloudera Я использую 3 исполнителя, но...