мониторинг кластера Hadoop с ганглиями

Я новичок в Hadoop и пытаюсь отслеживать работу многоузлового кластера с помощью ганглиев. Настройка gmond выполняется на всех узлах, а мониторинг ганглиев выполняется только на главном узле. Однако графики метрик хаупа есть только для главного узла и просто системные метрики для рабов. Включают ли эти метрики hadoop на главном устройстве метрики ведомого устройства? Или в файлах конфигурации есть какая-то ошибка? Любая помощь будет оценена по достоинству.


person user93    schedule 15.04.2014    source источник


Ответы (2)


Я думаю, вам следует прочитать это чтобы понять, как метрики передаются между ведущим и подчиненным.

Тем не менее, я хотел бы проинформировать, что, как правило, метрики, основанные на Hadoop или Hbase, напрямую передаются/отправляются на главный сервер (под главным сервером я подразумеваю сервер, на котором установлен gmetad). Все другие метрики, связанные с ОС, сначала собираются gmond, установленным на соответствующем подчиненном сервере, а затем перенаправляются на gmond, установленный на главном сервере.

Итак, если вы не получаете какие-либо метрики подчиненных серверов, связанные с ОС, значит, в вашем gmond.conf есть некоторая неправильная конфигурация. Чтобы узнать больше о настройке ганглиев, прочитайте это. Это помогло мне и может помочь вам наверняка, если вы пройдете внимательно.

person Rohit    schedule 24.10.2014

В ваших конфигурационных файлах ошибка.

Точнее, в передаче/сборе данных, какой бы подход вы ни использовали.

person Has QUIT--Anony-Mousse    schedule 15.04.2014