HiveOnSpark для Cloudera Manager 5.15 или 6.0? - PullRequest
0 голосов
/ 10 сентября 2018

Похоже, что HiveOnSpark не поддерживается в Cloudera Manager.

https://www.cloudera.com/documentation/spark2/latest/topics/spark2_known_issues.html#ki_hive_on_spark

Хотя я заметил, что кто-то говорит, что Hive версии 2.2.0 поддерживает Spark 2.x.

Можем ли мы действительно использовать Hive на Spark? (ссылка ниже)

Cloudera Hive на Spark 2.x?

1 Ответ

0 голосов
/ 11 сентября 2018

Если вы хотите Spark2, то в данный момент он не поддерживается. Основываясь на информации об упаковке CDH6.0.0, он использует Hive 2.1.1, который совместим только с Spark 1.6. Если вы хорошо используете Spark 1.6, то это так. См. Запуск Apache Hive на Spark в CDH для получения дополнительной информации.

Совместимость версий можно найти по адресу Hive on Spark: Getting Started .

enter image description here

...