Data Platform Engineer

Что за роль

В этой роли вы будете заниматься разработкой и поддержкой платформы данных, обеспечивая эффективное управление данными и интеграцию различных систем. Вы будете взаимодействовать с облачными платформами и инструментами для обработки данных, а также участвовать в проектировании и оптимизации процессов обработки данных.
Что предстоит делать:
• Разработка и поддержка ETL-процессов с использованием Airflow и Dagster.
• Интеграция данных из различных источников, включая AWS, Azure и GCP.
• Оптимизация работы с базами данных, такими как Redshift и Snowflake.
• Настройка и управление потоками данных с помощью Kafka и Pulumi.
• Создание и поддержка документации по архитектуре данных и процессам обработки.

Что важно знать

Эта позиция требует уверенного владения инструментами обработки данных и облачными технологиями. Вы будете работать в команде, ориентированной на инновации и эффективность, с возможностью полностью удаленной работы. Ожидается, что вы будете активно участвовать в проектировании архитектуры данных и оптимизации процессов, что позволит значительно повысить производительность и качество обработки данных.