Elasticsearch Spark, как сделать запрос несколько раз? - PullRequest
0 голосов
/ 13 февраля 2019

Я на ноутбуке Jupyter.

Я бы хотел использовать запрос dsl для подготовки исходного Dataframe.

Я использую conf.set("es.query", dsl_query) для этого.(https://www.elastic.co/guide/en/elasticsearch/hadoop/current/configuration.html#_querying)

Но затем я хочу применить другой запрос для подготовки другого Dataframe, и я не могу найти способ применить новый dsl_query без создания нового SparkContext

НоЯ также не нашел способа воссоздать SparkContext в среде jupyter.

Я хочу запустить анализ, используя QueryDSL-1 в качестве базовой линии, а затем запустить другой анализ, используя QueryDSL-2 в качестве другой базовой линии

Есть ли способ сделать это без создания двух записных книжек?

...