Data Engineering Team Lead
Что за роль
В этой роли вы будете руководить командой дата-инженеров, отвечая за проектирование и разработку инфраструктуры данных. Проект включает создание Data Lake с нуля, что предоставляет возможность для экспериментов и внедрения новых решений.
Что предстоит делать:
• Руководить командой дата-инженеров, включая код-ревью и распределение задач. • Проектировать конвейеры и инфраструктуру для обработки данных. • Разрабатывать и поддерживать парсеры для различных форматов документов (PDF, doc, xls и др.). • Автоматизировать процессы обработки и преобразования данных. • Настраивать мониторинг и отладку конвейеров для обеспечения их стабильности.
Что важно знать
Вам потребуется глубокое знание Python и опыт работы с библиотеками, такими как pandas и numpy. Знание Dagster для оркестрации конвейеров также является обязательным. Опыт работы с открытыми данными и долгосрочная поддержка парсеров будут вашим преимуществом.
Подписка TalentMove
Больше,
чем вакансии
→ TalentScanAI
Узнайте стоимость вашего опыта на рынке
→ Закрытое сообщество
Нетворкинг и инсайды рынка труда
→ Топ вакансии
Лучшие вакансии с доставкой в Telegram