наше веб-приложение собирает огромное количество данных о действиях пользователей, сетевых операциях, загрузке базы данных и т. Д. И т. Д. И т. Д.
Все данные хранятся на складах, и у нас есть довольно много интересных взглядов на эти данные.
Если случается что-то странное, это может быть где-то в данных.
Однако, чтобы вручную определить, происходит ли что-то необычное, нужно постоянно просматривать эти данные и искать странности.
Мой вопрос: каков наилучший способ обнаружить изменения в динамических данных, которые можно рассматривать как «необычные».
Можно ли использовать байесовские фильтры (о которых я упоминал, когда читал об обнаружении спама)?
Любые указатели были бы великолепны!
EDIT:
Для уточнения данных, например, показана суточная кривая загрузки базы данных.
Эта кривая обычно выглядит как кривая вчерашнего
Со временем эта кривая может медленно меняться.
Было бы хорошо, если бы кривая изо дня в день изменялась, скажем, в некоторых периметрах, предупреждение могло сработать.
R