Старший разработчик сервисов данных по Python

Что за роль

Вакансия предполагает работу в команде разработчиков, занимающихся созданием и поддержкой микросервисов для управления данными в рамках Космической Системы. Основная задача заключается в разработке пайплайнов обработки данных и интеграции вычислительных модулей, что требует глубокого понимания процессов контроля качества данных и проектирования моделей данных.

Что предстоит делать

• Разрабатывать микросервисы управления данными в рамках Космической Системы
• Создавать пайплайны обработки данных ETL/ELT
• Интегрировать вычислительные модули (микросервисы)
• Реализовывать процессы контроля качества данных
• Разрабатывать модели данных и согласовывать дата-контракты
• Работать с СУБД Postgres и Clickhouse
• Обрабатывать и анализировать данные с использованием Pandas, NumPy, Polars

Что потребуется

• Инженерное или техническое образование
• Опыт разработки на Python от 3 лет
• Знание библиотек для анализа данных: Pandas, NumPy, Polars
• Опыт работы с PostgreSQL и ClickHouse
• Опыт работы с инструментами ETL/ELT, такими как Airflow или Dagster
• Опыт разработки веб-приложений на FastAPI
• Знание контейнеризации с Docker

Что важно знать

Роль требует глубокого понимания принципов проектирования и работы с хранилищами данных, а также навыков командной разработки с использованием инструментов, таких как Confluence, Jira и Git.