не может создать H2OContext в Databricks - используя pysparkling - PullRequest
0 голосов
/ 18 мая 2018

Я не могу создать H2OContext в Spark Databricks - используя pysparkling.Это дает следующую ошибку.

Код: из pysparkling import *
Код: import h2o
Код: h2oConf = H2OConf (spark)
Код: h2oConf.set ("spark.ui.enabled", True)

Out [2]: конфигурация газированной воды: режим внутреннего кластера: внутренние работники: нет cloudName: еще не установлен, он будет установлен автоматически перед запуском H2OContext.flatfile: true clientBasePort: 54321 nodeBasePort: 54321 cloudTimeout: 60000 h2oNodeLog: INFO h2oClientLog: INFO nthreads: -1 drddMulFactor: 10

Код: h2oContext = H2OContext.getOr20foreate (): java.lang.NoSuchFieldError: quasibinomial

Вот все детали кластера:
1. Кластер:
Версия времени выполнения: Spark 2.1 (Автообновление, Scala 2.11) Тип:Стандартные рабочие: 4

Библиотеки, прикрепленные к указанному кластеру: h2o_pysparkling_2.1,
h2o-genmodel.jar

1 Ответ

0 голосов
/ 22 мая 2018

Нашел проблему.Я использовал кластер Spark 2.1 (Автообновление, Scala 2.11).Но я должен использовать кластер Spark 2.1.X-dbx (вы должны использовать версию Spark 2.1 и Scala 2.11) при работе с газированной водой H2O.

...