Отправка задания Spark с использованием API Livy Rest с заголовками - PullRequest
Новая
       13

Отправка задания Spark с использованием API Livy Rest с заголовками

0 голосов
/ 09 мая 2019

Я пытаюсь отправить задание Spark, используя Livy Rest API с заголовками аутентификации для файла. 

{
 "file": "http://example.com/spark-examples.jar", 
 "className": "org.apache.spark.examples.SparkPi",
 "args": ["100"]
}

Файл (в данном случае: spark-examples.jar) находится в защищенной среде, поэтому мне нужно передать заголовок для аутентификации, чтобы получить этот файл.

Есть способ сделать это?

У меня есть попытка: 

"headers": {"Auth": "sample"},

Но это не работает!

...