Как интерпретировать вероятность превосходства в байес-тесте?
A/B тестыmediummiddle
Вопрос с собеседования аналитика по теме «A/B тесты».
quiz-bank
Варианты ответа
Это частотный p-value, то есть вероятность увидеть такой или более экстремальный эффект при верной нулевой гипотезе
Это байесовская апостериорная вероятность того, что эффект варианта B по сравнению с A строго больше 0, с учётом данных и выбранного приора
Это метрика SRM, характеризующая нарушение рандомизации между группами
Это минимально детектируемый эффект (MDE), который тест способен обнаружить при заданной мощности
Как разобрать этот вопрос на собеседовании
Разбери, что именно проверяет вопрос, проговори ход решения по шагам и подумай о крайних случаях. На собеседовании ценят структурное рассуждение и умение объяснить логику, а не только финальный ответ.
На собеседовании по такому вопросу важно не только назвать ответ, но и кратко объяснить, почему он верный.
Тема вопроса — «A/B тесты». Чтобы подготовиться к похожим задачам, отрабатывай их на практике: раздел практики помогает довести навык до автоматизма, а раздел вопросов — увидеть формулировки, которые реально встречаются на интервью аналитика данных.
Разбор ответа
Подробный разбор с объяснением «почему правильный ответ верный» и почему остальные неверны — после регистрации.
3000+ вопросов с разбором, quiz-режим с проверкой, AI-собес и подготовка к интервью аналитика.