DevOps Engineer для Data Platform & OT Integration

Что за роль

Вакансия DevOps Engineer в проекте табачной компании, ориентированная на создание платформы Data Ocean. Роль включает в себя развертывание и интеграцию OT-систем, а также построение надежной инфраструктуры для Data Engineering.

Что предстоит делать

• Построение и администрирование компонентов Lakehouse/Streamhouse: Apache Iceberg, Apache Paimon, MinIO (S3), Apache Spark, Apache Flink, StarRocks/Trino.
• Настройка шлюзов для сбора данных с промышленных датчиков и контроллеров (OPC UA, MQTT), обеспечение надежной доставки данных в Kafka.
• Настройка процессов Change Data Capture (Debezium/Kafka Connect) для синхронизации данных из ERP/CRM систем.
• Управление кластерами Kubernetes, разработка Helm-чартов, настройка GitOps-процессов.
• Построение пайплайнов для сборки и деплоя Data-сервисов, автоматизация тестирования конфигураций.
• Организация локальных репозиториев (Nexus), настройка прокси-серверов.
• Интеграция с HashiCorp Vault для управления секретами, настройка мониторинга (Prometheus/Grafana) для Big Data-компонентов.

Что потребуется

• Опыт работы от 5 лет в роли DevOps SRE.
• Глубокое понимание архитектуры Kubernetes и опыт запуска Big Data-задач (Spark/Flink).
• Практический опыт работы с Apache Kafka и S3-совместимыми хранилищами.
• Опыт построения пайплайнов в Jenkins, знание Terraform и Ansible.
• Уверенное знание Linux и понимание сетевых протоколов.
• Уровень чтения технической документации английского языка (B1+).

Что важно знать

Проект требует высокой степени ответственности за построение надежной и безопасной инфраструктуры. Работа будет проходить в изолированных средах, что добавляет сложности и интереса к задачам.