Мощность теста и ошибка II рода: «незначимо» ≠ «нет эффекта»

Условие задания

Ты запустил A/B на **500 пользователях на группу**, получил **p-value = 0.20** — значимости нет.

Коллега: «Раз незначимо, значит эффекта нет, выкатываем как есть».

Прав ли он? Объясни роль **мощности** (power) и **ошибки II рода**.

Темы

матстат мощность ошибка II рода A/B интерпретация

Подсказки

• «Отсутствие доказательств» не равно «доказательству отсутствия»
• Power = $1-\beta$ = вероятность найти эффект, ЕСЛИ он есть
• Маленькая выборка → низкая мощность → легко «проморгать» реальный, но небольшой эффект

Все тестовые задания →

Частые вопросы

Какой уровень знаний нужен для задачи "Мощность теста и ошибка II рода: «незначимо» ≠ «нет эффекта»"?

Это задание для уровня Middle. Для middle-аналитиков с опытом 1-3 года, требует уверенного владения темой и понимания edge cases.

На каких собеседованиях встречается такая задача?

Подобные задания в категории «Статистика» регулярно дают на собеседованиях аналитика данных в Яндекс, Сбер, Ozon, Авито, Тинькофф, Wildberries, T-Bank, X5, ВТБ и других крупных IT-компаниях. Тематика: матстат, мощность, ошибка II рода, A/B, интерпретация.

Сколько времени даётся на решение?

На реальном собеседовании на подобную задачу отводится 15-30 минут — оцениваются подход, корректность, обработка edge cases. Для тренировки рекомендуем сначала решить самостоятельно, потом сверить с эталонным решением и подсказками.

Где ещё потренироваться по теме «Статистика»?

На zasqlpython.ru есть другие задания в категории «Статистика», продуктовые кейсы, справочник метрик, AI мок-собеседование с разбором ваших ответов.

← Все задания