Вариант: mean = 548, sd = 690, n = 8200. Контроль: mean = 520, sd = 610, n = 8000. И дисперсии, и размеры групп разные. Какой тест корректен и каков результат?
A/B тестыhardsenior
Вопрос с собеседования аналитика по теме «A/B тесты».
Манна–Уитни — Уэлч требует нормальности, которой тут нет; ранговый p ≈ 0.03, на грани значимости.
Парный t-тест по юзерам — связка групп даёт t ≈ 3.10, p ≈ 0.002, сильно значимо.
t-тест Уэлча — он не требует равенства дисперсий и n; t ≈ 2.74, p ≈ 0.0062, различие значимо.
t-тест Стьюдента с pooled-дисперсией — при таких n он эквивалентен Уэлчу и даёт t ≈ 2.74, p ≈ 0.0062.
Как разобрать этот вопрос на собеседовании
Разбери, что именно проверяет вопрос, проговори ход решения по шагам и подумай о крайних случаях. На собеседовании ценят структурное рассуждение и умение объяснить логику, а не только финальный ответ.
Это вопрос продвинутого уровня — на собеседовании по нему обычно идут уточняющие follow-up вопросы, поэтому держи в голове крайние случаи и альтернативные решения.
Тема вопроса — «A/B тесты». Чтобы подготовиться к похожим задачам, отрабатывай их на практике: раздел практики помогает довести навык до автоматизма, а раздел вопросов — увидеть формулировки, которые реально встречаются на интервью аналитика данных.
Разбор ответа
Подробный разбор с объяснением «почему правильный ответ верный» и почему остальные неверны — после регистрации.
3000+ вопросов с разбором, quiz-режим с проверкой, AI-собес и подготовка к интервью аналитика.