Middle DataOps Engineer

Что за роль

DataOps-инженер присоединится к команде Holocron, которая развивает инфраструктуру данных 2ГИС. В фокусе — эксплуатация хранилищ и инструментов обработки данных, запуск Ceph-кластера и участие в переходе на Lakehouse. Также важно поддерживать надёжную работу платформенных компонентов и разбирать нестандартные ситуации с Kubernetes.

Что предстоит делать

• Запустить Ceph-кластер и участвовать в развитии Lakehouse-инфраструктуры на базе S3/Ceph, Iceberg, Trino/StarRocks и Alluxio.
• Поддерживать HDFS, Spark, ClickHouse и Airflow, обеспечивая стабильную работу компонентов дата-платформы.
• Сопровождать Kubernetes в нетривиальных случаях, связанных с эксплуатацией инфраструктуры.
• Развивать мониторинг и алертинг, анализировать инциденты и помогать устранять их причины.
• Взаимодействовать с NOC по вопросам сетевой инфраструктуры.

Что потребуется

• От двух лет опыта эксплуатации Ceph в production.
• Практический опыт работы с Kubernetes в production и понимание сетей, storage и операторов.
• Уверенное владение Linux и базовое понимание сетей.
• Опыт хотя бы с частью технологий Kafka, Spark, ClickHouse, Airflow, Prometheus и Grafana.
• Знакомство с Flink и опыт работы в командах дата-платформы будут преимуществом.

Что важно знать

В команде разработчики самостоятельно поддерживают базовые Helm-чарты, деплой и мониторинг, поэтому инженер сосредоточится на эксплуатации платформы и более сложных инфраструктурных задачах. Формат работы можно выбрать: удалённо из любого города России либо офисный или гибридный режим в Москве, Санкт-Петербурге или Новосибирске. Уровень оплаты обсуждается индивидуально.