Вы тестируете новую страницу товара; цель — увеличить покупки. Какая метрика наиболее логична как основная метрика для решения о запуске?
AСреднее время на странице товара в секундах среди пользователей, увидевших страницу хотя бы один раз за период
BКоличество скроллов на странице товара в среднем на сессию среди пользователей, открывших страницу за период
CКонверсия в покупку среди пользователей, увидевших страницу товара хотя бы один раз за период
DКоличество просмотренных изображений товара в среднем на сессию среди пользователей, открывших страницу за период
Правильный ответ. Основная метрика должна напрямую отражать цель эксперимента, а не промежуточные действия.
Разбор
Если продуктовая цель — покупки, то решающая метрика должна измерять именно покупку или шаг, максимально близкий к ней. Время на странице и скроллы могут быть полезными диагностическими показателями, но они легко растут из-за фрикции. Поэтому их уместнее держать как дополнительные, а конверсию в покупку — как основную метрику.
Можно заниматься бесплатно
Готовим вопросы…
Три вопроса по теме этой страницы, с объяснениями.
Ещё вопросы по теме «A/B-тесты в продуктовой аналитике»
- Какая формулировка лучше всего соответствует проверяемой гипотезе для A/B-теста?
- Что в A/B-тесте обычно означает разделение на контрольную и тестовую группы?
- Вы увеличиваете частоту push-уведомлений, ожидая рост заказов. Какая метрика наиболее уместна как страховочная?
- Когда `A/B test` обычно предпочтительнее, чем сразу делать полный выкат изменения?
- Какой подход к остановке эксперимента лучше всего снижает риск подглядывания и спорных выводов о результате?
- Все вопросы по «A/B-тесты в продуктовой аналитике» →