Разработчик Flink

Что за роль

Мы ищем разработчика Flink, который будет участвовать в развитии современной Data Platform. Ваша работа будет сосредоточена на проектировании потоковых пайплайнов и построении архитектуры Data Lake.

Что предстоит делать:
• Проектирование, разработка и сопровождение стриминговых пайплайнов
• Реализация бизнес-логики и трансформаций данных во Flink, Spark и Java
• Построение и сопровождение потоковой обработки данных от источника до витрин
• Инкрементальная загрузка и публикация витрин данных через dbt, Trino и Iceberg
• Проектирование структуры хранения и партиционирования данных в Data Lake
• Работа с колоночными форматами хранения данных и снапшотами
• Реализация надёжных механизмов доставки данных, обеспечение идемпотентности и обработки дубликатов
• Документирование архитектурных решений и участие в развитии платформы

Что важно знать

Роль требует сильной мотивации развиваться в области потоковой обработки данных. Вы будете работать с современными технологиями и иметь возможность влиять на архитектурные решения. Идеально, если у вас есть опыт работы с большими объемами данных и понимание концепций Data Lake.

О компании