Data Engineer для Real-Time

Что за роль

Вакансия для Data Engineer (Real-Time) в компании PARI, где требуется специалист для работы с потоковыми данными и их обработкой. Основное внимание уделяется построению систем для реального времени, что требует знания современных технологий обработки данных.

Что предстоит делать

• разрабатывать и поддерживать системы обработки потоковых данных с использованием Apache Kafka и Apache Flink
• настраивать и оптимизировать ETL-процессы с помощью Apache Airflow
• работать с ClickHouse для хранения и анализа данных
• создавать SQL-запросы для извлечения и обработки данных
• сотрудничать с командами разработки и аналитики для интеграции решений в существующие системы

Что важно знать

Идеальный кандидат должен иметь опыт работы с инструментами обработки данных и быть готовым к решению сложных задач в реальном времени. Ожидается высокая степень вовлеченности в проекты и возможность влиять на архитектуру данных.