Lead Data Platform Engineer
Что за роль
CareeRoom ищет Lead Data Platform Engineer для проектирования и развития единой платформы данных. Она должна поддерживать масштабируемую и надёжную обработку интенсивных вычислительных нагрузок и давать дата-инженерам и аналитикам инструменты для самостоятельной работы. В зоне ответственности — архитектура, техническая дорожная карта и стандарты платформы.
Что предстоит делать
- Проектировать архитектуру платформы и оценивать её масштабируемость, надёжность и производительность.
- Разрабатывать техническую дорожную карту, соотнося платформенные решения с бизнес-целями и потребностями исследователей.
- Создавать системы оркестрации многоэтапных пайплайнов обработки данных, а также ключевые компоненты: панель управления, оркестраторы, агенты, API и SDK.
- Развивать self-service-инструменты для дата-инженеров и аналитиков, внедрять мультитенантность, разграничение доступа и аудит-логирование.
- Поддерживать целостность, надёжность и безопасность данных на всех этапах обработки.
- Планировать вычислительные и storage-ресурсы, проводить бенчмаркинг и развивать observability: мониторинг, APM и алертинг.
- Формировать технические стандарты, унифицировать стек и инструментарий, систематизировать процессы разработки и вести архитектурную документацию.
Что потребуется
- Опыт проектирования горизонтально масштабируемых и отказоустойчивых data-intensive систем на bare-metal, виртуальных машинах и/или в Kubernetes.
- Уверенное владение Python, опыт разработки backend-сервисов и API на FastAPI.
- Опыт работы с оркестраторами пайплайнов, например Airflow или Dagster, и понимание HTC/HPC-систем.
- Знание распределённых систем хранения, включая Ceph/CephFS и S3-совместимые хранилища, а также различий между объектным и файловым хранением.
- Опыт построения CI/CD-пайплайнов в GitLab и способность аргументировать системные архитектурные решения.
- Навык внедрения инженерных стандартов: архитектурных принципов, code review, документации и практик эксплуатации.
Что важно знать
Будут преимуществом разработка на Go, глубокое понимание Kubernetes, опыт со Slurm и Singularity/Apptainer, а также знакомство с биотехнологиями или биоинформатикой. Работа проходит на стыке медицины, генетики и IT: компания проводит молекулярно-генетические исследования в онкологии, микробиологии, иммунологии и инфекционных заболеваниях, а также занимается разработкой лекарств и тест-систем. Предусмотрены оформление по ТК РФ, обучение и профессиональное развитие; график — 5/2, офис в Москве, после испытательного срока возможен гибридный формат.
Подписка TalentMove
Больше,
чем вакансии
→ TalentScanAI
Узнайте стоимость вашего опыта на рынке
→ Закрытое сообщество
Нетворкинг и инсайды рынка труда
→ Топ вакансии
Лучшие вакансии с доставкой в Telegram