Senior Data Engineer по рынкам капитала

Что за роль

Senior Data Engineer будет развивать инженерную часть работы с данными в контексте рынков капитала и финансовых услуг. В исходном описании указаны восемь лет опыта, уровень Senior и стек Python, SQL, Spark, AWS, Airflow, dbt, Docker и Kubernetes. Английский указан среди требуемых языков.

Что предстоит делать

• Разрабатывать и поддерживать конвейеры данных на Python и Apache Spark.
• Писать и оптимизировать SQL-запросы для преобразования и обработки данных.
• Оркестрировать регулярные процессы загрузки и обработки данных с помощью Apache Airflow.
• Создавать и сопровождать модели преобразования данных в dbt.
• Использовать AWS для размещения и эксплуатации компонентов инфраструктуры данных.
• Контейнеризировать сервисы с Docker и поддерживать их запуск в Kubernetes.

Что потребуется

• Опыт работы в области Data Engineering от восьми лет.
• Уверенное владение Python и SQL, опыт работы с Apache Spark.
• Практический опыт с AWS, Apache Airflow и dbt.
• Знание Docker и Kubernetes.
• Английский язык; уровень владения в описании не уточняется.

Что важно знать

Вакансия относится к финансовым услугам и рынкам капитала. В исходном сообщении обозначен офисный формат, но конкретный город, график, зарплата и дополнительные условия не указаны.