Data Engineer / Data Analyst
Описание роли
На позиции Data Engineer / Data Analyst вы будете отвечать за полный цикл работы с данными от анализа существующих бизнес-сущностей в легаси до проектирования и реализации современного DWH. Основная задача — миграция данных из реляционной БД MSSQL в новое хранилище, создание эффективных ETL/ELT-конвейеров и моделирование данных по методологии Data Vault.
Ваши ключевые обязанности:
• Анализ легаси-источников в MSSQL: выявление бизнес-сущностей, зависимостей и регламентных операций;
• Проектирование и оптимизация потоков переноса данных из MSSQL в новое хранилище (Postgres, ClickHouse);
• Разработка моделей данных и трансформаций с помощью dbt, поддержание истории изменений и гарантия целостности бизнес-метрик;
• Реализация и документирование ETL/ELT-конвейеров на Python, взаимодействие с объектным хранилищем S3;
• Автоматизация и оркестрация процессов в Apache Airflow: настройка DAG, мониторинг задач;
• Интеграция стриминговых данных через Kafka для обеспечения обмена событиями в реальном времени;
• Поддержание методологий Data Vault и DataOps: контроль версий моделей, тестирование, CI/CD-развёртывание;
• Ведение технической документации и коммуникация с командами аналитиков и бизнес-стейкхолдерами.
Уникальность вакансии
Вы получите доступ к передовым практикам Data Engineering и аналитики в полностью удалённом формате. Задачи включают не только рутинное администрирование баз, но и разработку стратегически важных моделей данных, внедрение Data Vault и dbt. Мы ценим инициативу: вы сможете предложить новые методы оптимизации и участвовать в развитии архитектуры DWH.
Почему стоит выбрать эту роль:
• Работа с современным стеком: Python, SQL, Postgres, ClickHouse, MongoDB, Kafka, Airflow, dbt;
• Реальные задачи по миграции и консолидированию данных из различных источников;
• Полная удалёнка и гибкий график, сотрудничество через ИП;
• Влияние на бизнес-аналитику и принятие решений;
• Возможность расширить экспертизу в Data Vault и DataOps.
О компании
Мы — небольшая команда аналитиков и инженеров, работающая над проектами в сфере больших данных и бизнес-аналитики. Наши решения помогают клиентам оптимизировать отчётность, повышать скорость принятия решений и масштабировать хранилища. Команда ценит прозрачность процессов, открытые коммуникации и профессиональный рост каждого участника. Контактный канал — Telegram, пишите @SueBrut для обсуждения деталей.
