Senior Data Engineer / Архитектор данных

Что за роль

На проект биотехнологической компании ищут архитектора данных / Senior Data Engineer с практическим опытом построения Lakehouse. Основной результат — архитектура и надёжные потоки данных для промышленной эксплуатации, работающие с файловыми и табличными источниками. В отборе важны реальные реализованные решения и личный вклад кандидата.

Что предстоит делать

• Проектировать и строить Lakehouse для хранения и обработки файловых и табличных данных.
• Создавать production-grade потоки данных из файловых сервисов, включая работу с версионированием.
• Настраивать процессы загрузки и оркестрации данных с использованием NiFi и Airflow.
• Применять Iceberg, Ceph и Lakekeeper в архитектуре хранилища и потоков данных.
• Прорабатывать ролевое управление доступом (RBAC) для компонентов решения.
• Обеспечивать пригодность потоков данных к промышленной эксплуатации и надёжную обработку источников.

Что потребуется

• Практический опыт проектирования и построения Lakehouse.
• Опыт работы с файловыми и табличными данными.
• Опыт создания потоков данных из файловых сервисов с версионированием.
• Практическое владение NiFi, Airflow, Iceberg, Ceph и Lakekeeper.
• Опыт применения RBAC и готовность подробно рассказать о собственном вкладе в реализованные решения.

Что важно знать

Проектная работа для биотехнологической компании. Предусмотрено полностью удалённое взаимодействие с ограничением по территории — РФ. Оплата указана как до 2 000 рублей в час или до 330 000 рублей в месяц; оформление — через ИП или самозанятость. Для отклика просят прислать резюме, текущий город, ожидаемую ставку, возможную дату старта и краткое описание построенных Lakehouse-решений, личной зоны ответственности и использованных технологий.