Как анализировать и запрашивать большие порции данных

Question

Мне нужно:

1. Анализировать большие файлы http журналов

• Я думаю об использовании mapreduce, но я не уверен, где его разместить. Должен ли я использовать App Engine Mapper или EC2 + MapReduce или просто использовать его в моем VPS?
• Другие предложения, кроме MapReduce?

2.Сохранить и запросить результаты

• После анализа всех данных мне нужно сохранить их и представить пользователю в лучшем виде. Как мне сохранить результаты? Является ли MongoDB хорошим решением для этого?

Спасибо.

Привет.

Answer 1

Вы видели BigQuery ?Похоже, именно то, что вам нужно.