Data Engineer / Data Analyst

Описание роли

На позиции Data Engineer / Data Analyst вы будете ответственны за анализ исторических данных в легаси-системах MSSQL и проектирование современной аналитической платформы. Ваша ключевая задача — собрать, структурировать и перенести данные из устаревших баз в новое хранилище DWH, обеспечив прозрачность и целостность метрик. В работе вы примените практики Data Vault для построения гибких моделей данных, разработаете и оптимизируете сложные SQL-запросы, создадите ETL/ELT-конвейеры на Python и организуете потоковую передачу событий через Kafka.

Основные обязанности:
• Анализ и документирование структуры легаси-БД MSSQL, выявление ключевых бизнес-сущностей и зависимостей;
• Проектирование целевой модели данных и оптимизация DWH под аналитические задачи с учётом Data Vault;
• Разработка и поддержка конвейеров ETL/ELT с использованием Python, Airflow, dbt;
• Настройка и мониторинг DAG в Apache Airflow для автоматизации задач загрузки и трансформации данных;
• Интеграция потоков реального времени через Kafka, обеспечение гарантированной доставки и целостности событий;
• Тестирование качества данных, настройка процессов контроля и восстановления, документирование процессов DataOps;
• Поддержание совместимости моделей с бизнес-метриками и внесение изменений по мере роста объёма данных.

Уникальность вакансии

Это предложение даёт полный цикл работы с данными: вы не ограничены только разработкой конвейеров, но и глубоко погружаетесь в анализ бизнес-логики, построение Data Vault и внедрение современных практик DataOps. Здесь вы:
• Сможете влиять на архитектуру хранилища данных и масштабировать решения;
• Работаете полностью удалённо через ИП с гибким графиком;
• Получаете возможность прокачать навыки SQL, Python, Kafka, Airflow и dbt;
• Сопровождаете проект на всех этапах — от сбора требований до запуска и поддержки в продакшене.

О компании

Наш клиент — специализированное IT-решение в области аналитики и автоматизации бизнес-процессов. Компания помогает крупным российским заказчикам внедрять платформы для обработки больших объёмов данных, обеспечивая прозрачные отчёты и ускорение принятия решений. Мы ценим профессионализм, открытость в коммуникациях и постоянное развитие технологий. Сотрудники отмечают дружелюбную атмосферу, поддержку сертификаций и участие в отраслевых конференциях.