Ошибка java.lang.StackOverflowError при выполнении анализа настроений на Spark (из-за функции карты) - PullRequest
0 голосов
/ 29 марта 2019

Мы обучаемся выполнять анализ настроений на данных в Твиттере с помощью Hadoop, и мы получаем вышеупомянутую ошибку от Spark, которая, как нам кажется, касается функции карты.

var labelAndPredsTrain = trainingData.map { point => 
  val prediction = model.predict(point.features)
  Tuple2(point.label, prediction)}

var labelAndPredsValid = validationData.map { point =>
  val prediction = model.predict(point.features)
  Tuple2(point.label, prediction)
}

Ошибка:

java.lang.StackOverflowError
  at java.security.AccessController.doPrivileged(Native Method)
  at sun.reflect.ClassDefiner.defineClass(ClassDefiner.java:57)
  at sun.reflect.MethodAccessorGenerator$1.run(MethodAccessorGenerator.java:399)
  at sun.reflect.MethodAccessorGenerator$1.run(MethodAccessorGenerator.java:394)
  at java.security.AccessController.doPrivileged(Native Method)
  at sun.reflect.MethodAccessorGenerator.generate(MethodAccessorGenerator.java:393)
  at sun.reflect.MethodAccessorGenerator.generateSerializationConstructor(MethodAccessorGenerator.java:112)
  at sun.reflect.ReflectionFactory.newConstructorForSerialization(ReflectionFactory.java:340)
  at java.io.ObjectStreamClass.getSerializableConstructor(ObjectStreamClass.java:1420)
  at java.io.ObjectStreamClass.access$1500(ObjectStreamClass.java:72)
  at java.io.ObjectStreamClass$2.run(ObjectStreamClass.java:497)
  at java.io.ObjectStreamClass$2.run(ObjectStreamClass.java:472)
  at java.security.AccessController.doPrivileged(Native Method)
  at java.io.ObjectStreamClass.<init>(ObjectStreamClass.java:472)
  at java.io.ObjectStreamClass.lookup(ObjectStreamClass.java:369)
Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...