Databricks Data Engineer

Что за роль

Данная роль в EY фокусируется на проектировании и разработке современных lakehouse платформ для клиентов в Кипре и международных рынках. Это позиция для опытного Data Engineer, который будет работать с передовыми технологиями и оптимизировать процессы обработки данных.

Что предстоит делать

• Проектировать, разрабатывать и поддерживать масштабируемые data pipelines и lakehouse архитектуры с использованием Databricks.
• Разрабатывать и оптимизировать ETL/ELT нагрузки на базе Spark с использованием PySpark и/или Scala.
• Работать с Delta Lake, включая слои bronze/silver/gold, эволюцию схем, партиционирование и транзакции ACID.
• Создавать модели данных для аналитики, отчетности и data science.
• Оптимизировать Spark задачи, улучшая соединения, партиционирование и планы выполнения запросов.
• Участвовать в код-ревью и документации, поддерживать стандарты платформы и инженерного управления.

Что важно знать

Работа в гибридном формате с возможностью удаленной работы и гибким графиком. Предоставляются различные льготы, включая 13-ю зарплату и медицинскую страховку. Это отличная возможность для профессионального роста в команде, работающей с передовыми технологиями в области анализа данных.