Ситуация: Сервис поднял цену месячной подписки на 30% и хочет понять, вырос ли ARPU на назначенного пользователя, учитывая, что более высокая цена снижает конверсию в оплату.
Подписочный продукт тестирует новую цену: control 990₽, variant 1 290₽ (+30%). Метрика — ARPU на всех назначенных пользователей за первый биллинговый цикл (неплатящие входят как 0₽). Распределение выручки сильно скошено (масса нулей + тяжёлый хвост тарифов), дисперсии в группах разные, поэтому применяется t-тест Уэлча (равенство дисперсий не предполагается). Цель — не только моментальный ARPU, но и здоровье воронки.
Пользователей в тесте: control 6 000, variant 6 000 (сплит 50/50), длительность 21 день.Control (990₽): ARPU = 138.0₽, SD = 402.0₽; подразумеваемая конверсия в оплату ≈ 13.9%.Variant (1 290₽): ARPU = 151.0₽, SD = 470.0₽; подразумеваемая конверсия в оплату ≈ 11.7%.Абсолютная разница ARPU +13.0₽, относительная ≈ +9.4%.Дисперсии разные (SD 402 vs 470), распределение скошено — используем Welch t-test.Корреляция ARPU с pre-period ≈ 0.6 — кандидат на CUPED для снижения дисперсии.