трубопровод spark ML - Spark Structured Streaming - SCALA - выпуск Json 4S Джексона при попытке подгонки модели - PullRequest
0 голосов
/ 21 апреля 2020

Я использую scala для создания приложения Spark с источником потоковой передачи данных (потоковая структурированная искра) и искрой ML для обработки пакета данных и построения модели ML (искровой ML (не MLlib)).

Источник потока данных работает хорошо, но когда я пытаюсь соответствовать модели (бинарный регистр), я получаю ошибку ниже:

строка, которая вызывает ошибку
val model1 = pipeline.fit(training)

ошибка:

java.lang.NoSuchMethodError: org.json4s.jackson.JsonMethods$.parse(Lorg/json4s/JsonInput;Z)Lorg/json4s/JsonAST$JValue

версия с искрой: 2.4.4

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...