A/B: значимость разницы конверсий (z-тест долей)

Условие задания

Контроль: **1000** пользователей, **80** конверсий (8.0%). Тест: **1000** пользователей, **104** конверсии (10.4%).

**Задание:**
1. Значима ли разница на уровне $\alpha = 0.05$? Примените z-тест для двух долей.
2. Посчитайте абсолютный и относительный прирост (lift).
3. Что ещё проверили бы до выкатки на 100%?

Темы

A/B z-тест p-value scipy конверсия

Подсказки

• Объединённая доля: $\hat{p} = (x_1 + x_2)/(n_1 + n_2)$.
• Стандартная ошибка: $SE = \sqrt{\hat{p}(1-\hat{p})(1/n_1 + 1/n_2)}$, затем $z = (p_2 - p_1)/SE$.
• |z| > 1.96 → различие значимо при двустороннем $\alpha = 0.05$.

Все тестовые задания →

Частые вопросы

Какой уровень знаний нужен для задачи "A/B: значимость разницы конверсий (z-тест долей)"?

Это задание для уровня Middle. Для middle-аналитиков с опытом 1-3 года, требует уверенного владения темой и понимания edge cases.

На каких собеседованиях встречается такая задача?

Подобные задания в категории «A/B-тесты» регулярно дают на собеседованиях аналитика данных в Яндекс, Сбер, Ozon, Авито, Тинькофф, Wildberries, T-Bank, X5, ВТБ и других крупных IT-компаниях. Тематика: A/B, z-тест, p-value, scipy, конверсия.

Сколько времени даётся на решение?

На реальном собеседовании на подобную задачу отводится 15-30 минут — оцениваются подход, корректность, обработка edge cases. Для тренировки рекомендуем сначала решить самостоятельно, потом сверить с эталонным решением и подсказками.

Где ещё потренироваться по теме «A/B-тесты»?

На zasqlpython.ru есть другие задания в категории «A/B-тесты», продуктовые кейсы, справочник метрик, AI мок-собеседование с разбором ваших ответов.

← Все задания