Я новичок в сервисе Amazon Simple Workflow. Есть ли способ запустить рабочие процессы swf на EMR. У меня есть настройка интерфейса командной строки AWS, и я могу запустить hadoop и запустить кластер. Я не нашел достаточно документации по этому поводу и никакого источника в сети. Есть ли какие-либо изменения, позволяющие загружать кластер EMR с помощью SWF вместо AWS CLI. Спасибо.
Проблемы с использованием AWS SWF
Ответы (1)
Вы должны использовать один из выделенных SDK AWS для координации между двумя сервисами. Я успешно использую AWS SDK для Java для создания рабочего процесса, который запускает несколько кластеров EMR параллельно с разными заданиями, а затем просто ждет их завершения, что приводит к сбою всего рабочего процесса, если одно из заданий не удается.
Из всех доступных SDK AWS я настоятельно рекомендую Java. Он показался мне чрезвычайно надежным. Раньше я также использовал PHP, но он отсутствует в некоторых отделах (например, он не обеспечивает «потоковую» структуру для SWF).
person
Ana Todor
schedule
24.11.2014
