потоковая передача файлов журнала с помощью apache storm

Я новичок в storm, я хотел бы знать, есть ли какие-либо возможности для чтения файлов журнала сервера с помощью storm, если это возможно, как прочитать файл и как получить сообщения об ошибках, которые были записаны в файлы журнала.


person Praveen    schedule 01.09.2014    source источник
comment
Где вы храните файлы журналов? S3, HDFS, локальная файловая система, DB ??? Знакомы ли вы с какими-либо системами обмена сообщениями?   -  person Vor    schedule 02.09.2014
comment
Разве вы не хотели бы использовать что-то вроде Apache Flume вместо Storm?   -  person Kit Menke    schedule 02.09.2014


Ответы (1)


Вы можете настроить свой spout для чтения из файла журнала и выделения построчно при чтении журнала. Затем вывод может быть передан болту для анализа, является ли это ошибкой или каким-либо другим требованием.

person user2720864    schedule 01.09.2014