В соответствии с документацией spark , свойства, установленные в приложении с помощью SparkConf,...
Я хочу передать переменную через команду spark-submit, в то же время используйте файл конфигурации,...
Ниже код работает нормально в Intellij и отображает вывод. Когда я пытаюсь запустить его, используя...
Итак, у меня есть автономный сервер Spark History, работающий в Kubernetes, у которого нет...
Положение Бегущая искра на кластере YARN. Версия Spark 2.4.0 Наличие кастрюли для мойки с меткой...
Какова цель подачи искры?Из того, что я вижу, это просто добавление свойств и фляг в путь к классам
Я могу отправить задание spark через spark-submit, однако, когда я пытаюсь сделать то же самое...
У меня есть автономный spark 2.4.0 кластер, в котором мне нужно развернуть приложение, передавая...
У меня есть Java-искровой код, который читает определенные файлы свойств.Эти свойства передаются с...
Я изучаю различные варианты упаковки приложения Spark, и меня смущает, какой режим является лучшим...
Сводка : я использую spark-submit для отправки своего приложения в мой искровой кластер, но ресурс,...
Я пытаюсь запустить работу с помощью spark-submit в Windows.Я выполняю приведенную ниже команду...
У меня есть искровое задание, которое я обычно отправляю в кластер hadoop с локальной машины.Когда...
Я установил искровой кластер на моем компьютере с Windows 7 локально.У него есть мастер и рабочий...
Я пытаюсь отправить задание для запуска на моей машине следующим образом: $ spark-submit --master...
Я не могу отправить искровую работу. мой код maxPrice.scala, который отлично работает на Intellij....
Я пытаюсь spark-submit приложение в кластерном режиме Scala. В PySpark оно работало нормально, но...
Я запускаю скрипт на python из spark-submit, вывод stdout из скрипта выводится командой...
После вызова "spark-submit" нормально работает в оболочке /bin/bash -c '/local/spark-2.3
Я использую TimesTen База данных с Spark 2.3.0 Мне нужно обратиться к .so файлам в команде...
Я использую автономный Spark кластер и отправляю свои приложения (написанные в SparkR), используя...
Можно ли настроить искру таким образом, чтобы драйвер всегда запускался (например, в YARN) с...
Я пытаюсь запустить простую работу с помощью spark submit. Я делаю так: spark-submit --class com.my
Возможно ли иметь один главный файл, в котором хранится список аргументов, на который можно...
Я начинаю в Apache Spark, используя Java API, Maven и IntelliJ Idea Я создал программу, но получаю...