Senior Data Engineer (AI/ML Solutions)
Описание роли
На позиции Senior Data Engineer вы будете ключевым специалистом, отвечающим за проектирование и реализацию эффективных ETL-пейплайнов для обработки больших объемов данных. Ваши навыки и опыт помогут в создании надежной архитектуры хранилищ данных, что является критически важным для нашей компании, разрабатывающей передовые AI/ML решения. Вы будете работать с современными инструментами и технологиями, такими как Apache Spark и Airflow, что позволит вам внедрять лучшие практики обработки данных и повышения их качества. Ваша роль также включает контроль за качеством данных на всех этапах, что гарантирует успешную реализацию проектов и удовлетворение потребностей клиентов.
Ваши ключевые задачи:
• Написание и оптимизация ETL-пейплайнов для обработки данных;
• Проектирование архитектуры хранилищ данных, включая DWH и LakeHouse;
• Преобразование и обработка данных с использованием Spark (pyspark);
• Контроль качества данных и внедрение стандартов;
• Использование Apache Airflow для автоматизации процессов;
• Работа с SQL для выполнения запросов к большим объемам данных;
• Взаимодействие с командами разработки и аналитики для обеспечения качественного результата;
• Поддержка и развитие систем хранения данных, включая интеграцию с AWS и Kubernetes.
Уникальность вакансии
Работа в нашей международной B2B компании предлагает уникальные возможности для карьерного роста и профессионального развития в области AI и машинного обучения. Мы предоставляем гибкий график работы, что позволяет вам оптимально организовать свое время. Удаленная работа или офис на Кипре дает возможность выбирать наиболее комфортные условия для вас. Также мы обеспечиваем сотрудников всей необходимой техникой и предлагаем конкурентоспособные условия труда, включая ДМС и компенсацию занятий спортом и изучения английского языка. Мы ценим обучение и развитие, поэтому у нас есть корпоративная библиотека и доступ к полезным ресурсам.
О компании
Наша компания — это международный лидер в области разработки AI/ML решений, предлагающий инновационные продукты для различных секторов бизнеса. Мы работаем с большими данными и используем передовые технологии для создания эффективных решений, которые помогают нашим клиентам оптимизировать процессы и увеличивать прибыль. Мы гордимся тем, что являемся частью быстрорастущей индустрии, и сосредоточены на постоянном развитии команды и внедрении новых идей. Наша команда состоит из высококвалифицированных специалистов, которые работают над проектами, способствующими техническому прогрессу в мире AI и машинного обучения.
