BigData: сохранение впечатлений, клики с накоплением - PullRequest
0 голосов
/ 31 августа 2018

В настоящее время я создаю приложение, в котором я хотел бы отслеживать показы, клики, проданные товары и представлять их в графическом интерфейсе, где пользователь может группировать его ежедневно, ежемесячно, ежеквартально и т. Д.

Захват событий в графическом интерфейсе прост, но у меня есть следующие вопросы:

  1. Если у меня есть приложение внешнего интерфейса / бэкэнда, является ли API лучшим способом отправки события? Чтобы уменьшить нагрузку на основной API, возможно, создайте микросервис, который будет просто обрабатывать эти данные, чтобы он мог легко масштабироваться, когда объем становится большим?
  2. Какой самый эффективный способ хранения данных такого типа? В моем предыдущем опыте мы запускали задание каждый график для агрегирования значения, например, за неделю (сумма всех дней), за месяц (сумма всех недель). Что-нибудь, что может заменить работу? Есть ли опция в реальном времени?
  3. Какое хранилище данных наиболее эффективно для использования? Я читал некоторые примеры использования MongoDB / Hadoop, но не видел полного примера. Это хорошо? Может кто-нибудь предоставить ссылку? Любое другое техно стоит изучить?
  4. Любая библиотека, которая уже доступна для использования? Ява была бы хороша.
...