Spark SQL — диагностика производительности

Я использую Spark SQL, но некоторые запросы выполняются очень медленно. Я хотел бы знать, как я могу получить некоторое представление о том, почему запросы медленные, чтобы я мог попытаться оптимизировать систему.


person user2668128    schedule 04.12.2014    source источник


Ответы (1)


Проверьте уровень локализации этапов и время в пользовательском интерфейсе драйверов. Обычно вы можете найти его на порту 4040 на драйвере.

person 1esha    schedule 07.12.2014