Data Engineer / Data Analyst

Описание роли

На позиции Data Engineer с функциями Data Analyst вы станете ключевым специалистом, отвечающим за анализ существующих систем и создание новых высокоэффективных конвейеров обработки данных. Ваша основная задача — анализ легаси-систем на MSSQL и проектирование современного DWH на основе тех же источников. Работа включает глубокую проработку архитектуры хранилища, оптимизацию сложных SQL-запросов и автоматизацию ETL/ELT процессов.

Ключевые задачи:
* Сбор требований и анализ бизнес-сущностей в легаси БД MSSQL: выявление связей, регламентных операций и узких мест в производительности;
* Проектирование моделей данных по методологии Data Vault и других современных подходах: обеспечение истории изменений, прозрачности и восстановления информации;
* Разработка ETL/ELT-конвейеров с использованием Python, хранилища S3 и стриминга на Kafka для передачи событий в реальном времени;
* Создание трансформаций и витрин данных с помощью dbt: написание шаблонов, тестирование SQL-кода и привязка к бизнес-метрикам;
* Организация оркестрации через Apache Airflow: настройка DAG, мониторинг и автоматизация задач, обеспечение отказоустойчивости;
* Документирование моделей и процессов: подготовка технической документации, поддержание совместимости с процессами ELT и требованиями аналитики.

Особенности вакансии

Выбирая эту роль, вы получаете:
* Полностью удалённый формат сотрудничества через ИП с гибким графиком;
* Возможность влиять на архитектуру хранилища и строить масштабируемые решения для аналитики;
* Работу в современном стеке: Python, SQL, Postgres, Clickhouse, MongoDB, Kafka, S3, dbt, Airflow;
* Практику методологий Data Vault и DataOps: контроль версий моделей, автоматическое тестирование и безопасное развертывание;
* Влияние на бизнес-решения: от сбора данных до финальной витрины для аналитиков и конечных отчётов;
* Поддержку профессионального роста и обмен опытом внутри команды.

О компании ИП

Наша команда — независимый проект, реализуемый через ИП. Мы специализируемся на сквозной аналитике и построении хранилищ данных для клиентов из e-commerce и B2B-сегмента. Основная миссия — обеспечить прозрачность процессов и дать бизнесу точные инсайты на основе современных технологий. В работе мы ценим открытость, ответственность и постоянное улучшение качества данных. Каждый участник команды может предложить своё решение и влиять на стратегию проекта.