Задача: реализуй anomaly detection на row_count производственной таблицы без commercial tools. Используй pandas + rolling baseline + Z-score. Какой threshold выбрать и почему?

Вопрос с собеседования аналитика по теме «Data Quality».

Разбор ответа

Получить доступ к ответам — все вопросы →

Что дальше

• Раздел практики →
• Все 3000+ вопросов с разбором →

Похожие вопросы из категории «Data Quality»

• Задача: настроить data validation на 1M строк ежедневно загружаемых из Kafka. Какие основные сущности Great Expectations нужно использовать (Expectation, Suite, Batch, Validation, Checkpoint)? Покажи минимальный пример pipeline.
• Задача: Great Expectations поддерживает сотни expectations. Перечисли 10 наиболее часто используемых в production и объясни когда каждое применять.
• Задача: GE Data Docs автоматически генерирует HTML-отчёты после каждого validation. Как настроить deploy этих доков в S3 для команды и интегрировать с Slack-нотификациями при failures?
• Задача: GE Profiler анализирует существующий датасет и автоматически генерирует expectation suite. Когда это полезно vs ручное создание? Какие expectations Profiler ловит, а какие нет?
• Задача: что такое Batch и Batch Request в Great Expectations? Покажи как validate один файл (single batch) vs целый partition (multi-batch) vs streaming через Kafka.
• Задача: в dbt есть 4 generic tests из коробки: unique, not_null, accepted_values, relationships. Покажи как использовать каждый в schema.yml для модели dim_users. Какие edge-case подводные?
• Задача: написать custom singular test в dbt — проверка что в fact_orders за сегодня нет дублей по (user_id, product_id, created_at округлённому до часа). Покажи структуру файла и как зарегистрировать.
• Задача: что такое dbt-utils и dbt-expectations пакеты? Покажи 5 самых полезных тестов из каждого и зачем они нужны.

SQL-задачи по теме

• Anomaly detection: z-score выручки по дням
• Data quality check: orphan users

Полезные блог-статьи по теме

• Как стать аналитиком данных в 2026 году: полный гайд
• 10 функций pandas вместо for: окна и временные ряды
• A/B-тесты в Python: scipy.stats и расчёт значимости
• Топ-50 вопросов на собес аналитика 2026: SQL, Python, A/B