Senior Data Engineer для Spark, Scala

Что за роль

Senior Data Engineer в Hypercell Games отвечает за развитие и поддержку платформы данных, поддерживающей портфель публикаций студии. Вы будете разрабатывать и поддерживать ETL/ELT пайплайны, оптимизировать слои данных в BigQuery и обеспечивать высокое качество данных для множества продуктов.

Что предстоит делать:

• Проектировать, разрабатывать и поддерживать ETL/ELT пайплайны (Spark, Scala, Airflow). • Организовывать рабочие процессы в Apache Airflow. • Разрабатывать и оптимизировать слои данных в BigQuery, включая внешние таблицы на GCS. • Обрабатывать большие объемы данных с использованием Spark/Scala. • Обеспечивать качество данных через валидацию и мониторинг. • Подготавливать и поддерживать дата-марты для аналитики.

Что важно знать

Роль предлагает высокую степень автономии и возможность реализовать свои идеи в команде, работающей над играми, которые играют миллионы пользователей. Компания поддерживает профессиональное развитие, предлагает оплачиваемый отпуск и дружелюбную атмосферу.

Партнёрское размещение. ERID 2W5zFHoQEpH Партнёрское размещение. ERID 2W5zFJWuthw