Можно ли проверить версию среды выполнения Databricks в Azure?
Проверка версии среды выполнения Databricks в Azure
Ответы (3)
Среда выполнения Databricks - это набор основных компонентов, которые работают в кластерах, управляемых Azure Databricks. Он включает Apache Spark, но также добавляет ряд компонентов и обновлений, которые существенно улучшают удобство использования, производительность и безопасность аналитики больших данных.
При создании кластера вы можете выбрать одну из множества поддерживаемых версий среды выполнения.
Если вы хотите узнать версию среды выполнения Databricks в Azure после создания:
Перейдите на портал блоков данных Azure => Кластеры => Интерактивные кластеры => здесь вы можете найти версию среды выполнения.
Дополнительные сведения см. В разделе "Версии среды выполнения Azure Databricks < / а> ".
Надеюсь это поможет.
В Scala:
dbutils.notebook.getContext.tags("sparkVersion")
В Python:
spark.conf.get("spark.databricks.clusterUsageTags.sparkVersion")
Возвращает вам среду выполнения Databricks и версию Scala, e. г .: 5.0.x-scala2.11.
print (spark.version)
работал на меня