Firebase A / B тест выкатить лидера - PullRequest
0 голосов
/ 26 июня 2018

Я провел A / B тест для одной версии (1.14) моего приложения. Было несколько параметров и 3 группы (включая контрольную группу).

После запуска A / B теста я выпустил версии 1.15, 1.16 и 1.17 приложения.

Тест нашел лидера. Я ожидаю, что после развертывания лидера его конфигурация будет применена ко всем пользователям с этой версией (только для 1.14).

Но фактический результат:

  1. Я нажимаю «выкатить лидера»
  2. Появляется диалог с конфигами параметров (3 параметра)
  3. Я оставляю все параметры как "не меняйте значение", кроме одного
  4. Я перенаправлен на удаленную страницу конфигурации, которая не изменилась (параметр, который был изменен в диалоговом окне развертывания, остается по умолчанию)

Я устанавливаю приложение выпуска и отладки этой версии (1.14) и вижу, что измененные параметры не применяются.

Похоже, ничего не случилось.

Примечание: теперь у меня есть еще один работающий A / B-тест для версий 1.15, 1.16 и 1.17, основанный на тех же параметрах, что и законченный A / B-тест.

1 Ответ

0 голосов
/ 20 февраля 2019

это на самом деле больше не вариант. когда вы выкатываете, вы больше не можете изменять отдельные параметры, так как это по существу сделает ваши экспериментальные данные устаревшими. все значения должны корректно развернуться в новых версиях.

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...