Я новичок в PySpark и попытался настроить среду локально. Я установил Spark, Hadoop, PySpark, Livy...
Во-первых, я использую режим программирования livy с java.Затем я реализовал интерфейс задания,...
Я пытаюсь подать искровую работу через Ливи.В работе мне нужно опубликовать данные json в параметре...
Мне нужна ваша помощь, чтобы решить проблему.Что я хочу сделать ?Я хочу иметь HTML-страницу, где...
У меня проблема: я следую этому руководству по официальной документации Livy: [https://livy
Я следовал этому руководству: https://aws.amazon
Может ли кто-нибудь мне помочь? Как только вы инициируете отправку через Livy на EMR, приложения...
В моем приложении я отправляю работу spark через livy и возвращаю результат, каждый раз загружая...
Я в растерянности на данный момент.Я пытаюсь запустить PySpark / SparkR на Apache HUE 4.3,...
У нас есть 30-узловый кластер Hortonworks (HDP-2.6.2.0), на котором мы запускаем Zeppelin и...
Мы используем кластер HDInsight spark 2.3.Мы можем устанавливать и настраивать конфигурации Spark и...
Я работаю над ноутбуками Jupyter, использующими ядро sparkmagic (spark-scala), которое использует...
Какой самый простой способ добавить интерпретатор livy в Zeppelin, работающий на кластере EMR.Какой...
Я работаю над отправкой задания Spark с использованием метода POST пакетов Apache Livy. Этот...
Я хочу использовать Airflow для согласования заданий, которое включает в себя запуск некоторых...
Я создаю кластер EMR и использую ноутбук Jupyter для запуска некоторых задач. Мои задачи умирают...
Чего я хочу добиться, так это чтобы программа Scala Spark (в банке) получила сообщение POST от...
Запуск на том же хосте на одном узле кластера Hadoop EMR: Это прекрасно работает через zeppelin...
Мой livy.pyspark работает отлично, но livy.sparkr не работает с df
Мы пытаемся создать установку, где у нас есть сервер, который передает задания разных пользователей...
Сконфигурированный сервер livy на Kerberized CDH 5.10.x и нормально работающий на порту 8998, но...
Согласно этому документу , я должен найти zeppelin.livy.principal в конфигурации zeppelin или...
Использование Livy для выполнения скрипта, хранящегося в S3, через запрос POST, запущенный из EMR
Я создаю сеанс зажигания через LivyClient.Код для создания сеанса: - var client: LivyClient = null...
Я хочу отправить пакетные jar-задания Spark с использованием livy Programmatic API, как и при...