Data Engineer с фокусом на ETL и облачные решения

Описание роли

На позиции Data Engineer вы станете важным членом команды, отвечающим за создание и оптимизацию эффективных ETL/ELT процессов. В вашей ответственности будет работа с данными, которые обслуживают аналитические и бизнес-приложения, а также взаимодействие с командами AI и BI для решения сложных задач. Вы будете строить надежные облачные решения на платформе Microsoft Azure, что позволит обеспечить высокую доступность и производительность систем. Ваша работа будет способствовать принятию обоснованных решений на основе данных и улучшению бизнес-процессов.
Ваши ключевые задачи:
• Проектирование и реализация ETL/ELT процессов для обработки данных в реальном времени.
• Разработка и поддержка конвейеров данных с использованием инструментов, таких как Airflow и Dagster.
• Оптимизация SQL-запросов и работа с базами данных SQL Server и Azure SQL.
• Участие в проектировании архитектуры данных и моделей данных для различных проектов.
• Внедрение практик DataOps для управления жизненным циклом данных и обеспечения качества данных.
• Сотрудничество с командами AI и BI для интеграции аналитики в бизнес-процессы.
• Использование контейнеризации с Docker и оркестрации с Kubernetes для управления средами разработки и продакшена.
• Применение технологий для потоковой передачи данных, таких как Kafka.

Уникальность вакансии

Работа в этой роли предоставит вам возможность развивать свои навыки в передовых облачных технологиях и данных. Вы будете иметь возможность работать в высококвалифицированной команде, которая активно применяет инновационные решения для обработки данных. Проект, над которым вы будете работать, имеет стратегическое значение для бизнеса, что дает вам возможность непосредственно влиять на результаты компании и развивать свои профессиональные навыки. У вас будет возможность реализовать свои идеи и внедрить лучшие практики в области DataOps.

О компании

Компания, в которой открыта данная вакансия, активно работает в области DataTech, предоставляя решения для бизнес-аналитики и оптимизации процессов. Она занимается разработкой высоконагруженных систем, которые помогают клиентам принимать обоснованные решения на основе данных. С командой из более чем 100 специалистов, компания активно развивает свои проекты в несколько странах и ценит инновации и креативность. Команда ориентирована на сотрудничество и постоянное обучение, что создает уникальную атмосферу для профессионального роста.