Обязанности:

• Развитие направления Data Lakehouse (Apache Iceberg + Spark + Trino + Kafka) со слоистой архитектурой bronze/silver/gold; Проектирование и поддержка корпоративного хранилища данных (DWH/КХД) и аналитических витрин;
• Организация и реализация end-to-end CDCпроцессов (Debezium/Kafka Connect) из источников (MSSQL, PostgreSQL и др.) без простоя бизнес-процессов;
• Разработка и поддержка ETL/ELT-пайплайнов и Airflow-оркестрации batchтрансформаций;
• Обеспечение качества данных, контроль корректности моделей, сверка source
  → target и полноты загрузки; Участие в проектах интеграции и миграции данных (в т.ч. взаимодействие с направлениями MDM/АСУ НСИ и BI);
• Взаимодействие с бизнесподразделениями, владельцами данных, ИТ-командами и подрядчиками по вопросам развития КХД/Lakehouse; Подготовка технической документации и предложений по развитию направления для руководства департамента;
• Участие в incident response и диагностике проблем в data flow

Требования:

• Высшее профессиональное образование
• Опыт работы по профилю деятельности не менее 5 лет
• Дополнительные требования:
• приветствуется опыт работы с apache iceberg, spark, trino, kafka/debezium, clickhouse, dbt, sql, gitlab ci/cd, а также наличие профильных сертификатов (например, microsoft certified: azure data engineer associate, dbt
  certified developer или аналогичных по dwh/data engineering).

Условия:

• Оформление к сектор аутстаффинга
• Социальный пакет

Необходимые навыки

• ETL/ELT
• DWH
• Data Lakehouse
• инженерия данных