Data Engineer

Что за роль

Ищут Data Engineer для проектирования и создания ETL-процессов в области Big Data. В работе важны сильное программирование на Python, практическое знание SQL и понимание жизненного цикла модели данных. Вакансия доступна кандидатам, которые сейчас находятся в Польше и имеют разрешение на работу в стране; спонсорство не предусмотрено.

Что предстоит делать

• Проектировать и создавать оптимальные ETL-процессы для обработки данных в среде Big Data.
• Разрабатывать и поддерживать решения на Python для загрузки, преобразования и подготовки данных.
• Использовать SQL для работы с данными и реализации этапов обработки.
• Учитывать жизненный цикл моделей данных при построении и развитии процессов.
• Работать с инструментами оркестрации, качества данных и разработки, включая Airflow, Kedro, Soda и Great Expectations.
• Использовать Linux, Git, Terraform, Docker и Kubernetes в инженерных процессах.

Что потребуется

• Не менее трёх лет релевантного опыта.
• Образование в области инженерии, компьютерных наук, математики, статистики или смежной дисциплины.
• Знание подходов и практик Big Data.
• Уверенное программирование на Python и практический опыт работы с SQL.
• Опыт проектирования ETL-процессов, понимание жизненного цикла модели данных.
• Знакомство с Linux, Git, Terraform, Docker, Kubernetes, Kedro, Soda, Great Expectations и Airflow.

Что важно знать

В объявлении указаны два возможных типа контракта: B2B или трудовой договор (UoP). Отклик с резюме предлагают отправить по электронной почте. По условиям отбора рассматривают только кандидатов, уже находящихся в Польше и имеющих право работать в стране; если обратной связи не будет, кандидат не перешёл в следующий этап.