Инженер сопровождения Big Data Platform

Что за роль

Вакансия для инженера сопровождения Big Data Platform в компании Centicore. Роль включает поддержку и развитие Data Lake-платформы и инфраструктуры S3/Object Storage, что требует экспертизы в администрировании Linux и высоконагруженных распределённых систем.

Что предстоит делать

• Сопровождать и развивать Data Lake-платформу
• Поддерживать S3/Object Storage инфраструктуру
• Работать с Kubernetes, Apache Spark, Airflow, Flink, Kafka и Apache Iceberg
• Следить за состоянием платформы, настраивать мониторинг и алертинг
• Диагностировать и устранять production-инциденты
• Разбирать проблемы с производительностью платформы и storage-систем
• Автоматизировать эксплуатационные задачи
• Взаимодействовать с командами Data Engineering и инфраструктуры

Что потребуется

• Экспертный опыт администрирования Linux
• Опыт сопровождения высоконагруженных распределённых систем
• Понимание S3/Object Storage и архитектуры распределённых хранилищ
• Опыт сопровождения Kubernetes-платформ
• Практический опыт работы с MinIO или другими Object Storage решениями
• Навыки troubleshooting CPU, RAM, network, disk I/O, latency и throughput

Что важно знать

Компания предлагает возможность обучения по стеку, если у вас есть опыт с S3/Object Storage и Kubernetes. Это отличная возможность для профессионалов, желающих развиваться в области Big Data.