Ведущий инженер данных

Что за роль

Ведущий инженер данных отвечает за развитие data-архитектуры отдела и надёжность production-систем. В зоне ответственности — архитектура пайплайнов, DWH и интеграций, качество данных, мониторинг и инженерные практики. В работе сочетаются проектирование долгосрочных решений и самостоятельная разработка на Airflow, Python, SQL и Spark.

Что предстоит делать

• Развивать data-архитектуру отдела и проектировать пайплайны, DWH и интеграции.
• Настраивать мониторинг и CI/CD для процессов обработки данных.
• Строить систему Data Quality: внедрять автоматические проверки, отслеживать отклонения и предотвращать попадание некорректных данных в отчётность.
• Разрабатывать и оптимизировать процессы на Airflow, Python, SQL и Spark.
• Проводить аудит текущей архитектуры и готовить варианты её развития или замены, оценивая стоимость, бюджет, риски и ожидаемый эффект.
• Повышать отказоустойчивость production-контура, поддерживать его техническое состояние и разбирать сложные инциденты.
• Развивать стандарты разработки и инженерные практики отдела.

Что потребуется

• Опыт от трёх лет в роли Middle или Senior Data Engineer.
• Практика самостоятельного проектирования и развития data-архитектуры.
• Опыт работы с production-системами и ответственность за их работоспособность.
• Опыт применения или внедрения AI-инструментов будет преимуществом.

Что важно знать

В вакансии обозначена широкая техническая зона ответственности: от архитектурных решений и оценки альтернатив до стабильности production и качества данных в отчётности. В описании указаны основные технологии и ожидания к опыту; зарплата и дополнительные условия не раскрыты.