Hadoop / Elastic Map Уменьшить с помощью двоичного исполняемого файла? - PullRequest
1 голос
/ 05 ноября 2010

Я пишу и распределяю приложение для обработки изображений, используя потоковую передачу hadoop, python, matlab и упругое отображение карт.Я скомпилировал двоичный исполняемый файл моего кода Matlab, используя компилятор Matlab.Мне интересно, как я могу включить это в свой рабочий процесс, чтобы двоичный файл являлся частью обработки на карте упругости Amazon?

Похоже, я должен использовать распределенный кэш Hadoop?

код очень сложен (и не написан мной), поэтому его перенос на другой язык сейчас невозможен.

Спасибо

Ответы [ 2 ]

0 голосов
/ 06 ноября 2010

Джозеф,

Я только что задал похожую, но более общую версию вашего вопроса.Надеюсь, мы получим несколько ответов.;)

Потоковая передача Hadoop: Mapper 'оборачивает' двоичный исполняемый файл

  • Nick
0 голосов
/ 05 ноября 2010

Следующее не совсем ответ на ваш вопрос Hadoop, но я не удержался, не спросив, почему вы не выполняете свои задания обработки на ресурсах Grid?В Grid есть проверенные решения для выполнения интенсивных вычислительных процессов.И, насколько я знаю, среда исполнения Matlab обычно доступна на этих ресурсах.Вы также можете рассмотреть возможность использования сетки, особенно если вы учитесь в академических кругах.

Удачи

...