Расчет результатов теста AB - PullRequest
1 голос
/ 06 марта 2012

У меня есть веб-страница, где пользователям показывают набор продуктов, и они выражают интерес к продуктам, которые им нравятся, выбирая их.

Я провожу эксперимент AB, чтобы проверить две версии этой страницы, каждая из которых показывает свой набор продуктов. Метрика, которую я тестирую в этом эксперименте, - это количество продуктов, выбранных пользователями.

Все ресурсы, которые я нашел при тестировании AB, предполагали модель "испытаний и конверсий", в которой имеется X испытаний и, из этих испытаний, Y конверсий. В этой модели Y <= X. </p>

В моем случае у меня есть X = # показов страницы и Y = # продуктов, выбранных на этой странице, где Y> X в некоторых случаях. Как определить, какая версия работает лучше в этом случае?

1 Ответ

1 голос
/ 23 ноября 2012

Для каждого варианта вы можете разделить общее количество объектов на количество показов. Таким образом, вы выберете вариант, который даст вам больше объектов на пользователя.

...