Data Engineer / Data Analyst

Описание роли

На позиции Data Engineer с функциями Data Analyst вы возьмете ответственность за анализ существующих легаси-источников в MSSQL, проектирование и реализацию современных DWH-решений, а также обеспечение непрерывности бизнес-метрик через эффективные ETL/ELT-конвейеры. Ваша задача — собрать информацию о структуре и наполнении легаси-баз, выявить ключевые сущности, зависимости и регламентные операции, а затем спроектировать оптимальные потоки переноса данных из MSSQL в новое хранилище. Вы будете разрабатывать и поддерживать модели данных с применением методологий Data Vault и передовых практик DataOps, автоматизировать процессы оркестрации в Apache Airflow и контролировать качество данных на всех этапах миграции.

Основные обязанности:
* Анализ источников в легаси MSSQL: сбор метаданных, выявление бизнес-сущностей и зависимостей;
* Проектирование и реализация ETL/ELT-конвейеров для переноса данных в новое DWH;
* Разработка и поддержка моделей данных в dbt: создание шаблонов, SQL-трансформаций и витрин данных;
* Оркестрация рабочих процессов в Apache Airflow: настройка DAG, автоматизация, мониторинг и логирование;
* Интеграция стриминговых событий через Kafka для обеспечения обмена данными в реальном времени;
* Обеспечение прозрачности и истории изменений моделей данных с помощью Data Vault;
* Документирование архитектуры данных и поддержка актуальности техдокументации;
* Оптимизация сложных SQL-запросов и поддержка аналитических нагрузок в Clickhouse, PostgreSQL и MongoDB;
* Внедрение практик DataOps: контроль версий, тестирование, мониторинг и безопасное развертывание моделей.

Уникальность вакансии

Эта позиция сочетает в себе функции Data Engineer и Data Analyst, что позволит вам глубоко погружаться в бизнес-логику и форму данных, а не просто прокачивать инфраструктуру. Вы получите:
* Полностью удаленный формат работы с гибким графиком;
* Проект миграции легаси-данных с нуля, возможность сформировать DWH по требованиям бизнеса;
* Современный стек: Python, SQL, Kafka, dbt, Apache Airflow, Clickhouse, MongoDB;
* Возможность влиять на архитектуру и развивать процессы DataOps на уровне компании;
* Участие в формировании стандартов документирования и тестирования данных;
* Карьерный рост в направлении технического Data Lead и архитектуры аналитических платформ.

О компании ИП

Работа организована через ИП на удаленной основе, что обеспечивает прозрачность взаимодействия и гибкость трудовых отношений. Компания специализируется на проектах по миграции и аналитике данных для крупных клиентов из ритейла, e-commerce и финансового сектора. Основные ценности — качество данных, автоматизация процессов и развитие экспертизы внутри команды. Вы станете частью небольшой, но высококвалифицированной группы инженеров данных и аналитиков, где инновации и обмен знаниями поощряются на каждом этапе.