Нужно доставлять изменения из прод-PostgreSQL в DWH с задержкой меньше минуты. Сейчас ночной polling по updated_at: он теряет DELETE, пропускает out-of-order правки и грузит базу. Какой подход CDC выберешь?
SQLmediummiddle
Проверяет владение SQL: выборки, агрегации, JOIN-ы и оконные функции.
data-engineeringcdcdebeziumstreaming
Варианты ответа
Полный снапшот каждые 10 минут с diff на стороне DWH: сравнение снапшотов надёжнее разбора журналов и дешевле всего при минутных задержках
Триггеры AFTER INSERT/UPDATE/DELETE в audit-таблицу: единственный способ не терять DELETE, а накладные расходы на OLTP-транзакции пренебрежимы
Log-based CDC (Debezium поверх PG WAL): читает журнал транзакций без нагрузки на таблицы, ловит все изменения включая DELETE, задержка — секунды
Ускорить polling до раза в минуту и добавить soft-delete флаг: журналы транзакций нестабильны при репликации и для прод-CDC не подходят
Как разобрать этот вопрос на собеседовании
Начни с разбора схемы: какие таблицы и ключи участвуют, где могут быть NULL и дубли строк. Затем реши, что важнее — JOIN, агрегация с GROUP BY/HAVING, оконная функция или подзапрос. На собеседовании ценят не только правильный результат, но и умение проговорить план запроса и крайние случаи (пустые группы, деление на ноль, фан-аут при JOIN).
На собеседовании по такому вопросу важно не только назвать ответ, но и кратко объяснить, почему он верный.
Тема вопроса — «SQL». Чтобы подготовиться к похожим задачам, отрабатывай их на практике: sql-тренажёр помогает довести навык до автоматизма, а раздел вопросов — увидеть формулировки, которые реально встречаются на интервью аналитика данных.
Разбор ответа
Подробный разбор с объяснением «почему правильный ответ верный» и почему остальные неверны — после регистрации.
3000+ вопросов с разбором, quiz-режим с проверкой, AI-собес и подготовка к интервью аналитика.