Инженер по обработке данных

Что за роль

Инженер по обработке данных отвечает за разработку и оптимизацию конвейеров данных, обеспечивая бесперебойный поток информации между системами и платформами. Работа включает использование облачных технологий и инструментов для обработки данных, а также моделирования машинного обучения.

Что предстоит делать

• Разрабатывать и оптимизировать конвейеры данных для обеспечения эффективного обмена данными
• Работать с ETL-процессами и облачными сервисами (MS Azure, GCP, AWS)
• Создавать модели машинного обучения и интегрировать их в конвейеры данных
• Использовать инструменты, такие как Spark и Kafka, для обработки потоковых данных
• Обеспечивать высокую производительность и надежность систем обработки данных

Что потребуется

• Знание английского языка
• Опыт программирования на Python и SQL
• Навыки управления базами данных
• Опыт работы с конвейерами обработки данных и облачными сервисами
• Знания в области машинного обучения и работы с инструментами, такими как Spark и Kafka

Что важно знать

Предоставляется медицинское страхование. Работа в Катаре предполагает возможность релокации, что открывает новые горизонты для профессионального роста и личного развития.