как установить spark.sql.thriftServer.incrementalCollect = true

Question

Говорят, что установка spark.sql.thriftServer.incrementalCollect = true предотвращает остановку Spark Thrift Server. Можем ли мы установить это с помощью интерфейса Ambari? Под каким названием конфигурации? Или мы должны добавить пользовательское значение ключа для этого? С уважением

Answer 1

Есть два способа сделать это.

Вы можете добавить его в файл spark-defaults.conf

spark.sql.thriftServer.incrementalCollect     true

или при запуске благотворительного сервера

./sbin/start-thriftserver.sh --conf spark.sql.thriftServer.incrementalCollect=true ....