Проверка версии среды выполнения Databricks в Azure - PullRequest
0 голосов
/ 12 декабря 2018

Можно ли проверить версию среды выполнения Databricks в Azure?

Ответы [ 2 ]

0 голосов
/ 14 декабря 2018

В Scala:

dbutils.notebook.getContext.tags("sparkVersion")

В Python:

spark.conf.get("spark.databricks.clusterUsageTags.sparkVersion")

Возвращает вам среду выполнения Databricks и версию Scala, например: 5.0.x-scala2.11.

0 голосов
/ 12 декабря 2018

Databricks Runtime - это набор основных компонентов, которые работают в кластерах, управляемых Azure Databricks.Он включает в себя Apache Spark, но также добавляет ряд компонентов и обновлений, которые значительно повышают удобство использования, производительность и безопасность аналитики больших данных.

При создании версии вы можете выбирать из множества поддерживаемых версий среды выполнения.cluster.

enter image description here

Если вы хотите узнать версию среды выполнения Databricks в Azure после создания:

Перейдите на Портал кирпичей данных Azure => Кластеры => Интерактивные кластеры => здесь вы можете найти версию времени выполнения.

enter image description here

Подробнее см. " Версии среды выполнения Azure Databricks ".

Надеюсь, это поможет.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...