У нас есть 30-узловый кластер Hortonworks (HDP-2.6.2.0), на котором мы запускаем Zeppelin и используем YARN в качестве менеджера ресурсов.Большую часть времени мы используем PySpark через интерпретатор Livy или Sparklyr через RStudio.Все работало нормально, но теперь интерпретатор Livy PySpark больше не работает, хотя командная строка pyspark работает нормально.Кроме того, приложение YARN создается, когда код выполняется в ячейке Zeppelin и не уничтожается.
Единственная ошибка, которую я получаю, это " Преобразователь умер: " - см. Изображение для получения более подробной информации.,
Вот что я пробовал до сих пор
- Убил все процессы Zeppelin и перезапустил демон Zeppelin несколько раз
- Перезапустил интерпретатор Livy через Zeppelin (Меню пользователя> Интерпретатор> нажатие кнопки «перезапустить» на интерпретаторе Livy)
Я также не обнаружил ошибок в логах.Я совершенно невежествен, пожалуйста, помогите.
--------------- Обновление ---------------
Работают переводчики% livy.sql,% livy.spark и% livy.sparkr.Не работает только% livy.pyspark