Проверка версии среды выполнения Databricks в Azure

Можно ли проверить версию среды выполнения Databricks в Azure?


person Krzysztof Słowiński    schedule 12.12.2018    source источник


Ответы (3)


Среда выполнения Databricks - это набор основных компонентов, которые работают в кластерах, управляемых Azure Databricks. Он включает Apache Spark, но также добавляет ряд компонентов и обновлений, которые существенно улучшают удобство использования, производительность и безопасность аналитики больших данных.

При создании кластера вы можете выбрать одну из множества поддерживаемых версий среды выполнения.

введите описание изображения здесь

Если вы хотите узнать версию среды выполнения Databricks в Azure после создания:

Перейдите на портал блоков данных Azure => Кластеры => Интерактивные кластеры => здесь вы можете найти версию среды выполнения.

введите описание изображения здесь

Дополнительные сведения см. В разделе "Версии среды выполнения Azure Databricks < / а> ".

Надеюсь это поможет.

person CHEEKATLAPRADEEP-MSFT    schedule 12.12.2018

В Scala:

dbutils.notebook.getContext.tags("sparkVersion")

В Python:

spark.conf.get("spark.databricks.clusterUsageTags.sparkVersion")

Возвращает вам среду выполнения Databricks и версию Scala, e. г .: 5.0.x-scala2.11.

person Hauke Mallow    schedule 14.12.2018
comment
Можно ли получить только версию времени выполнения databricks. Вместо 5.0.x-scala2.11 просто 5.0 - person harsha87; 20.02.2021

print (spark.version)

работал на меня

person Eugene Lycenok    schedule 18.08.2020
comment
извините ... это не рабочая версия ... но это помогло мне в то время ... не знал, что репутация уменьшается после удаления ответа :) - person Eugene Lycenok; 26.03.2021