Тест конверсии в оплату. Контроль A: 12 000 визитов, 360 оплат (3,0%). Вариант B: 12 000 визитов, 432 оплаты (3,6%). Уровень значимости α = 0,05 (двусторонний). Значимо ли различие по z-тесту для двух долей?
A/B тестыmediummiddle
Вопрос с собеседования аналитика по теме «A/B тесты».
значимостьz-тестдве долиp-valueконверсия
Варианты ответа
z ≈ 1,30, p ≈ 0,19 — эффект есть, но статистически неотличим от нуля
z ≈ 0,60, p ≈ 0,55 — конверсии практически совпадают, эффекта нет
z ≈ 2,60, p ≈ 0,009 < 0,05 — различие значимо, вариант B выигрывает
z ≈ 2,60, p ≈ 0,009 > 0,05 — различие пока незначимо, надо копить данные
Как разобрать этот вопрос на собеседовании
Разбери, что именно проверяет вопрос, проговори ход решения по шагам и подумай о крайних случаях. На собеседовании ценят структурное рассуждение и умение объяснить логику, а не только финальный ответ.
На собеседовании по такому вопросу важно не только назвать ответ, но и кратко объяснить, почему он верный.
Тема вопроса — «A/B тесты». Чтобы подготовиться к похожим задачам, отрабатывай их на практике: раздел практики помогает довести навык до автоматизма, а раздел вопросов — увидеть формулировки, которые реально встречаются на интервью аналитика данных.
Разбор ответа
Подробный разбор с объяснением «почему правильный ответ верный» и почему остальные неверны — после регистрации.
3000+ вопросов с разбором, quiz-режим с проверкой, AI-собес и подготовка к интервью аналитика.