Приложение Ec2 + Hadoop для Java - PullRequest
0 голосов
/ 12 ноября 2011

Мне нужно реализовать распределенную нагрузку на процессор, основанную на Java. База данных не используется, каждая работа получает простой текстовый файл. Все должны работать на EC2.

Я ищу среду, которая позволила бы мне запускать экземпляры, распределять задания между ними, собирать результаты и так далее. Файл JAR будет оставаться неизменным почти все время, в основном параметры меняются между каждым прогоном. Все это должно быть очень динамичным. То есть Каждый полный цикл занимает не более 15-20 минут, поэтому я бы хотел, чтобы время каждого запуска было быстрым.

Какая ваша рекомендация?

Спасибо

Y.

1 Ответ

0 голосов
/ 12 ноября 2011

Посмотрите на Whirr, http://whirr.apache.org/. Он работает практически на каждом облаке.

Вот как запустить кластер Hadoop на EC2 с Whirr и запустить задание. http://whirr.apache.org/docs/0.6.0/quick-start-guide.html

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...