Middle / Senior Data Engineer
Что за роль
CHOICEIT ищет Middle / Senior Data Engineer для работы с хранилищами данных и процессами их подготовки. В описании указаны SQL, PostgreSQL, ClickHouse, Greenplum, Apache Spark, Apache Airflow, DWH и ETL. Основная задача специалиста — строить и поддерживать надёжные потоки данных, чтобы данные поступали в хранилище и были готовы к дальнейшему использованию.
Что предстоит делать
- Разрабатывать и поддерживать ETL-процессы: извлекать данные из источников, преобразовывать их и загружать в целевые системы.
- Создавать и оптимизировать SQL-запросы для PostgreSQL, ClickHouse и Greenplum.
- Работать с архитектурой и структурой DWH, поддерживать согласованность и доступность данных.
- Настраивать и сопровождать оркестрацию задач обработки данных в Apache Airflow.
- Использовать Apache Spark для обработки и преобразования наборов данных.
- Разбирать сбои в пайплайнах, находить причины ошибок и восстанавливать корректное выполнение заданий.
Что потребуется
- Опыт работы на уровне Middle или Senior в направлении Data Engineering.
- Практические знания SQL и PostgreSQL.
- Опыт работы с ClickHouse и/или Greenplum, а также понимание задач DWH.
- Знакомство с Apache Spark, Apache Airflow и принципами построения ETL-процессов.
Что важно знать
В вакансии перечислен конкретный стек для разработки и сопровождения инфраструктуры данных. Указаны полный рабочий день и возможность работать удалённо; зарплатная вилка и требования к стажу в годах не приведены.
Подписка TalentMove
Больше,
чем вакансии
→ TalentScanAI
Узнайте стоимость вашего опыта на рынке
→ Закрытое сообщество
Нетворкинг и инсайды рынка труда
→ Топ вакансии
Лучшие вакансии с доставкой в Telegram