Data Engineer Middle+ | Python и ETL

Что за роль

В компании EvApps открыта вакансия Data Engineer Middle+ для разработки решения data lakehouse. Главная задача данной роли заключается в проектировании и оптимизации ETL-пайплайнов, а также в обработке больших объемов данных. Мы ищем специалиста, который уверенно владеет Python и имеет опыт работы с различными инструментами обработки и трансформации данных, такими как pandas и PySpark. Человек на этой позиции будет выполнять следующие задачи:

• Разработка и оптимизация ETL-пайплайнов для эффективной обработки данных;
• Обработка и трансформация XML-данных с использованием современных библиотек;
• Создание и поддержка raw-слоя в S3 с форматом хранения Parquet;
• Реализация нормализации и дедупликации данных;
• Подготовка решений к переносу в закрытый контур заказчика;
• Взаимодействие с аналитиками, архитектором и DevOps-командой;
• Обеспечение высокой производительности обработки данных.

Почему вакансия может быть интересна

Данная роль предлагает уникальные возможности для профессионального роста в сфере обработки данных. Вам предстоит работать над сложными проектами, связанными с большими данными и новыми технологиями, что позволит вам развивать свои навыки и получать опыт в передовых подходах к архитектуре данных. Кроме того, работа полностью удаленная, что обеспечивает гибкость в организации рабочего процесса. Вы будете частью команды, которая ценит инновации и эффективные решения, что способствует созданию атмосферы, нацеленной на результат.

О компании EvApps

EvApps — это динамично развивающаяся компания, которая предлагает решения в области обработки данных и аналитики. Мы работаем с крупными заказчиками и нацелены на создание высококачественных продуктов, которые отвечают современным требованиям рынка. Наша команда состоит из экспертов в своих областях, и мы постоянно ищем новые подходы к решению задач, чтобы оставаться на шаг впереди. Мы ценим инициативу и стремление к обучению, что создает уникальную корпоративную культуру, ориентированную на развитие и успех.

Партнёрское размещение. ERID 2W5zFHoQEpH Партнёрское размещение. ERID 2W5zFJWuthw