как удаленно отправлять спарк-задания в кластер Azure HDInsights без Livy - PullRequest
1 голос
/ 04 октября 2019

Я хочу отправить искровое задание в кластер Azure hdInsights из потока воздуха, я не хочу использовать livy, так как он не накапливает журналы потока воздуха. Можно ли сделать удаленно представить работу. SSH - 1 вариант, но если задание выполняется долго, это может привести к разрыву соединения. Есть ли другой вариант? Примечание. Кластер воздушного потока - это удаленный кластер, он не связан с искровым кластером.

...