Почему A/B-тест обычно запускают параллельно на контрольную и тестовую группы, а не сравнивают тестовую группу с прошлым месяцем?

При сравнении с прошлым месяцем меняются рекламные кампании, праздники, конкуренты и другие условия. Это делает вывод «фича улучшила метрику» сомнительным, потому что нет сопоставимой контрольной группы. В A/B-тесте группы идут одновременно, поэтому внешние факторы действуют на обе стороны примерно одинаково, и разница ближе к эффекту изменения. Параллельность не отменяет ни поэтапную раскатку, ни проверку долей групп — это отдельные практики безопасности экспериментов.