Извлечение очков из очень больших балок - PullRequest
0 голосов
/ 04 февраля 2011

У меня есть 10 сеток (в настоящее время хранятся как сетки ASCII из ГИС), каждая из которых содержит около 4,5 ГБ несжатого.Кроме того, у меня есть около 100 000 местоположений с координатами X и Y.Мне нужно извлечь значение сетки в каждом из этих мест.В настоящее время я делаю это с GRASS GIS, которая работает, но очень медленно.Кто-нибудь может порекомендовать мне библиотеку или язык программирования, наиболее подходящий для такой задачи?

Заранее спасибо!

1 Ответ

1 голос
/ 04 февраля 2011

Походит на классический вариант использования для Hadoop MapReduce .

Hadoop MapReduce - это модель программирования и программная среда для написания приложений, которые быстро обрабатывают огромные объемы данных параллельно на больших кластерах вычислительных узлов.

...