Senior Data Engineer для B2B SaaS
Что за роль
Senior Data Engineer будет заниматься построением дата-платформы с нуля для YCLIENTS. Основная задача заключается в создании лейкхауса, который будет включать в себя интеграцию с источниками данных, настройку инкрементов и разработку витрин данных. В ежедневную работу войдут:
- Подключение OLTP/API и настройка инкрементов в Iceberg (S3)
- Проведение PoC CDC через Debezium и Kafka
- Создание лейкхауса и запуск трансформаций Bronze, Silver и Gold
- Определение стратегии использования Trino для ad-hoc запросов и ClickHouse для BI
- Настройка мониторинга свежести данных и автоматизация бэкфиллов в Airflow
Почему вакансия может быть интересна
Роль предлагает уникальную возможность строить систему с нуля без необходимости миграции с легаси. Вы получите архитектурную свободу в выборе паттернов и инструментов, а также будете нести высокую ответственность за данные, которые обслуживают более 50,000 бизнесов в сфере услуг. Проект предполагает быструю реализацию первых витрин за 6–8 недель, что позволяет избежать долгих циклов проектирования.
Подписка TalentMove
Больше,
чем вакансии
→ TalentScanAI
Узнайте стоимость вашего опыта на рынке
→ Закрытое сообщество
Нетворкинг и инсайды рынка труда
→ Топ вакансии
Лучшие вакансии с доставкой в Telegram