Что делать, если p-value 0.051 при заранее заданной альфа 0.05?
A/B тестыeasyjunior
Вопрос с собеседования аналитика по теме «A/B тесты».
quiz-bank
Варианты ответа
Понизить заранее выбранный уровень значимости (альфа), чтобы сделать критерий ещё более строгим и добиться нужного результата
Задним числом поднять альфа до 0.051 или 0.1, чтобы объявить эффект статистически значимым, несмотря на исходный план анализа
Формально не отвергать H0 при заранее заданной альфа=0.05, зафиксировать результат как «на грани значимости» и при необходимости планировать дополнительный тест, но не объявлять победителя
Считать эффект доказанным, так как 0.051 «почти то же самое», что и 0.05, и интерпретировать результат как значимый
Как разобрать этот вопрос на собеседовании
Разбери, что именно проверяет вопрос, проговори ход решения по шагам и подумай о крайних случаях. На собеседовании ценят структурное рассуждение и умение объяснить логику, а не только финальный ответ.
Это базовый вопрос — на собеседовании его задают как разминку и фильтр, поэтому важно ответить уверенно и без заминок.
Тема вопроса — «A/B тесты». Чтобы подготовиться к похожим задачам, отрабатывай их на практике: раздел практики помогает довести навык до автоматизма, а раздел вопросов — увидеть формулировки, которые реально встречаются на интервью аналитика данных.
Разбор ответа
Подробный разбор с объяснением «почему правильный ответ верный» и почему остальные неверны — после регистрации.
3000+ вопросов с разбором, quiz-режим с проверкой, AI-собес и подготовка к интервью аналитика.