Data Engineer для SQL, Airflow, Spark

Что за роль

Вакансия для дата инженера с более чем 5-летним опытом работы, который будет проектировать и оптимизировать масштабируемые пайплайны обработки данных. Роль включает поддержку качества данных и участие в разработке AI/ML сервисов в рамках корпоративного центра ИИ.

Что предстоит делать

• Проектировать и оптимизировать пайплайны обработки данных на базе Airflow, Spark и Hadoop
• Поддерживать высокое качество данных: валидация, профилирование и мониторинг
• Обеспечивать своевременную поставку признаков для аналитики и машинного обучения
• Разрабатывать и оптимизировать ETL/ELT-процессы в Airflow
• Работать с интеграцией объектных хранилищ (S3) и потоковой обработкой (Kafka)

Что важно знать

Компания предлагает официальное трудоустройство, ДМС, комфортные офисные условия и возможности карьерного роста.