**Контекст.** A/B-тест новой страницы чекаута в интернет-магазине. Гипотеза: упрощённая форма поднимет конверсию в заказ примерно на 0.8 процентного пункта. Тест крутился две недели.
**Результаты:**
| Группа | Пользователи | Заказы | Конверсия |
|---|---|---|---|
| A (контроль) | 3000 | 300 | 10.0% |
| B (новый чекаут) | 3000 | 324 | 10.8% |
Продакт смотрит на p-value = 0.31 и говорит: «Эффекта нет, доказано, откатываем».
**Что сделать:**
1. Восстанови расчёт: посчитай z-статистику и p-value двухвыборочного z-теста долей.
2. Построй 95%-ный доверительный интервал для разности конверсий. Что он говорит о «доказанном отсутствии эффекта»?
3. Посчитай мощность этого теста при истинном эффекте $\delta = +0.8$ п.п. (лифт, заложенный в гипотезу):
$$1-\beta = \Phi\!\left(\frac{|\delta|}{SE} - z_{1-\alpha/2}\right)$$
4. Сколько пользователей на группу нужно, чтобы детектировать +0.8 п.п. с мощностью 80% при $\alpha = 0.05$?
5. Сформулируй корректный вывод для продакта в 2-3 предложениях.
p-value мощность mde размер выборки z-тест долей
Это задание для уровня medium. Senior-уровень — глубокое понимание темы, опыт решения нестандартных задач, обсуждение trade-off на собеседовании.
Подобные задания в категории «Статистика» регулярно дают на собеседованиях аналитика данных в Яндекс, Сбер, Ozon, Авито, Тинькофф, Wildberries, T-Bank, X5, ВТБ и других крупных IT-компаниях. Тематика: p-value, мощность, mde, размер выборки, z-тест долей.
На реальном собеседовании на подобную задачу отводится 30-60 минут с обсуждением подходов, оптимизаций и trade-off. Для тренировки рекомендуем сначала решить самостоятельно, потом сверить с эталонным решением и подсказками.
На zasqlpython.ru есть другие задания в категории «Статистика», продуктовые кейсы, справочник метрик, AI мок-собеседование с разбором ваших ответов.
← Все задания