Разработчик КХД для DWH Developer

Что за роль

Разработчик КХД занимается интеграцией данных из внешних систем, развитием корпоративного хранилища и подготовкой данных для BI. В работе сочетаются проектирование ETL-процессов, разработка витрин и оптимизация решений на ClickHouse, Oracle Exadata, Greenplum и Hadoop.

Что предстоит делать

• Внедрять новые продукты и технологии для интеграционных решений.
• Разрабатывать интеграционные механизмы, которые объединяют данные внешних систем в едином информационном пространстве.
• Создавать витрины данных в Oracle Exadata, Greenplum и Hadoop.
• Развивать слой данных для BI-систем и участвовать в комплексном тестировании интеграционных решений.
• Проектировать и оптимизировать решения на ClickHouse, включая работу с движками и индексами, а также интеграцию с промышленными СУБД и Hadoop.
• Планировать и оценивать сроки работ.

Что потребуется

• Высшее образование в области ИТ и опыт разработки интеграционных решений от трёх лет.
• Знание принципов проектирования DWH, ETL-процессов и витрин данных для BI; опыт работы с большими объёмами данных.
• Понимание архитектуры Hadoop и практический опыт с Hive, Sqoop, Impala и PySpark.
• Опыт разработки для Oracle Exadata и Greenplum с использованием Oracle Data Integrator (ODI) или связки Airflow и dbt.
• Опыт проектирования распределённых высоконагруженных систем и тестирования ETL.
• Знание SQL, pg/SQL и PL/SQL, опыт проектирования, разработки и оптимизации решений на ClickHouse.
• Наличие сертификатов по разработке в Greenplum и ClickHouse.

Что важно знать

Проект долгосрочный; работа организована удалённо с географическим ограничением по России. В описании указан уровень Junior, при этом среди требований — от трёх лет опыта и широкий набор технологий для корпоративных хранилищ данных.