Вы считаете конверсию из визита в покупку на уровне пользователя. Что корректно считать success и что считать trial для расчёта доли?
A
success: пользователь совершил покупку, trial: пользователь в выборке, доля считается как buyers/usersB
success: показ страницы товара, trial: факт покупки, доля считается как views/purchases за периодC
success: сессия пользователя, trial: день календаря, доля считается как sessions/days по выборкеD
success: выручка от пользователя, trial: пользователь, доля считается как revenue/users за окноПравильный ответ. Для доли нужен чёткий числитель
success и знаменатель trial на одной единице учёта.Разбор
Если метрика на уровне пользователя, то trial — пользователь, а success — факт покупки у этого пользователя. Тогда доля становится долей покупателей среди пользователей. Смешивать уровни (например, выручку и пользователей) нельзя: это уже не тест для долей, а среднее на пользователя. Типичная ошибка — менять знаменатель между группами или использовать разный уровень агрегации в числителе и знаменателе.
Можно заниматься бесплатно
Готовим вопросы…
Три вопроса по теме этой страницы, с объяснениями.
Ещё вопросы по теме «Тесты для долей»
- Команда считает конверсию из показа в клик: 80 кликов на 1000 показов. Как корректнее всего описать эту величину как долю?
- `конверсия` выросла с 5% до 6%. Как корректно назвать абсолютное изменение?
- Если `n` увеличили в 4 раза при том же `p`, как примерно изменится стандартная ошибка доли `SE = sqrt(p*(1-p)/n)`?
- Когда двухвыборочный `z-test` для сравнения долей обычно уместен?
- Какие допущения делают биномиальную модель разумной для конверсии?
- Все вопросы по «Тесты для долей» →