Конверсия по неделям упала, но в разрезе каналов конверсия почти не изменилась; при этом доля платного трафика выросла, а органики — упала. Как правильнее всего это интерпретировать?
AЭто сдвиг состава трафика: анализировать по разрезам каналов или сравнивать периоды с одинаковыми весами для разделения структуры и качества
BЭто прямое ухудшение продукта во всех каналах сразу: искать общую техническую причину или регресс в основном пользовательском пути
CЭто типичный случай среднего средних: интерпретировать такие данные нельзя до полной перезагрузки построения отчёта
DПолностью убрать платный канал из расчёта и считать общую конверсию по органическому трафику для устранения смешения
Правильный ответ. Если внутри каналов метрика стабильна, а общая меняется, это обычно сдвиг состава, а не изменение качества в каждом сегменте.
Разбор
Падение общей конверсии может быть вызвано ростом доли канала с низкой базовой конверсией, даже если внутри каналов ничего не ухудшилось. Чтобы корректно интерпретировать, разделите эффект на изменение внутри сегментов и изменение состава (сдвиг микса). Для сравнения периодов можно фиксировать веса каналов или анализировать метрику по каждому каналу отдельно на одном уровне агрегации.
Можно заниматься бесплатно
Готовим вопросы…
Три вопроса по теме этой страницы, с объяснениями.
Ещё вопросы по теме «Взвешенные средние и смешение»
- В отчёте по регионам у вас есть конверсия (покупки/визиты) и число визитов по каждому региону. Как корректно получить общую конверсию на уровне визита?
- У вас есть средняя длительность сессии по дням и число сессий по дням. Как корректно получить среднюю длительность сессии за неделю, чтобы не попасть в ловушку «среднего средних»?
- Вам дали ARPU отдельно для iOS и Android, а также количество пользователей в каждой платформе. Как корректно получить общий ARPU по продукту?
- Общая конверсия за месяц выросла, но в каждом канале (органика, платный, реферальный) конверсия почти не изменилась; при этом доли каналов заметно сместились. Какой термин лучше всего описывает ситуацию?
- В A/B тесте вариант B лучше по конверсии внутри каждого региона, но общая конверсия по всем регионам хуже у B. Какое объяснение наиболее правдоподобно?
- Все вопросы по «Взвешенные средние и смешение» →