Отсутствует вкладка «Потоковая передача» из интерфейса Spark - PullRequest
0 голосов
/ 06 декабря 2018

Я пытаюсь протестировать производительность приложения потоковой передачи, которое я написал и которое читает / записывает данные в Kafka.Код работает нормально, но я не вижу вкладку потоковой передачи в пользовательском интерфейсе.Я использую Ambari, но я предполагаю, что это особенность Spark.Я использую Spark 2.2.Пожалуйста, дайте мне знать, если я пропустил что-то настроить.

Я попытался запустить код из клиента Yarn / кластера Yarn / локального режима, но тот же результат.Я видел другой аналогичный пост https://community.hortonworks.com/questions/110212/hdp-26-spark-21-streaming-tab-not-available-in-the.html, Но я пытаюсь отслеживать, когда приложение работает и с узла драйвера.Тем не менее вкладка «Потоковая передача» отсутствует.

Мой сервер хронологии работает через порт 18080.И я бегу, используя следующий http: // - узел: 18080 /? ShowIncomplete = true.Но пропустив вкладку Streaming.

Я посмотрел код потоковой передачи Spark.Интересно, есть ли несоответствие версий между Spark и Kafka или что-то из-за чего эта вкладка не появляется.Не могу даже найти ошибку "Родительский SparkUI, чтобы прикрепить эту вкладку к не найденному!"

enter image description here

...