Сериализация искры с Kryo не удалась - PullRequest
0 голосов
/ 29 мая 2018

Локально

Я успешно запустил локальное приложение spark.Для этого я должен запустить на своей машине мастера по искрам и рабочего.Затем я выполняю spark-submit (выполнение было успешным).

Производство

При прохождении моей работы на производстве одно и то же приложение запускается в нескольких машинах на AWS иНе удалось выполнить.

Ошибка

java.lang.IllegalArgumentException: Class is not registered: scala.collection.immutable.MapLike$ImmutableDefaultKeySet

Вопросы

В чем разница между "Локально" и"Производство"?Можно ли смоделировать поведение «Производство» на моей машине, чтобы избежать будущих сбоев?

...