Data / ML Platform Engineer по Middle+ / Senior

Что за роль

Это позиция инженера по платформам данных и машинного обучения в стартапе AstraTech, который разрабатывает решения для здравоохранения. Основная задача заключается в создании эффективной Data Platform и ML/LLM Platform, что позволит улучшить процессы в медицинской сфере и помочь врачам в принятии решений.

Что предстоит делать

• Разрабатывать Python/SQL-пайплайны для загрузки и обработки данных из различных источников
• Проектировать таблицы хранилища с учетом сущностей, связей и правил преобразования
• Встраивать псевдоанонимизацию и проверки качества в потоки данных
• Готовить выборки для обучения и валидации моделей
• Обеспечивать прослеживаемость и воспроизводимость ML-экспериментов
• Сотрудничать с ML-командой для улучшения оценки моделей и подготовки данных

Что потребуется

• Уверенные навыки в Python и SQL, опыт написания поддерживаемого кода
• Практический опыт ETL/ELT, включая оркестрацию и инкрементальную обработку
• Знание S3, Parquet, pandas/Polars/PyArrow
• Понимание жизненного цикла ML и метрик
• Опыт работы с MLflow, ClearML или аналогами, а также с Docker и CI/CD
• Способность работать с чувствительными данными

Что важно знать

Проект предлагает уникальную возможность влиять на архитектуру платформы с нуля, работая на стыке Data Engineering и MLOps. Это не просто работа, а вклад в развитие технологий, которые помогают людям.