DWH Developer

Что за роль

DWH Developer будет разрабатывать интеграционные решения для корпоративного хранилища данных и развивать слой данных для BI-систем. В работе сочетаются проектирование ETL-процессов, создание витрин и интеграция данных из внешних систем в единое информационное пространство. Проект долгосрочный.

Что предстоит делать

• Внедрять новые продукты и технологии для интеграционных решений.
• Разрабатывать механизмы интеграции данных внешних систем с корпоративным хранилищем.
• Создавать витрины данных в Oracle Exadata, Greenplum и Hadoop.
• Развивать слой данных, используемый BI-системами.
• Участвовать в комплексном тестировании интеграционных решений и проверке ETL-процессов.
• Проектировать и оптимизировать решения на ClickHouse, включая работу с его движками и индексами.
• Планировать и оценивать сроки выполнения работ.

Что потребуется

• Высшее образование в области ИТ и опыт разработки интеграционных решений от трёх лет.
• Знание принципов проектирования DWH и ETL-процессов, опыт работы с большими объёмами данных.
• Понимание архитектуры Hadoop и практический опыт с Hive, Sqoop, Impala и PySpark.
• Опыт работы с Oracle Exadata и Greenplum; знание Oracle Data Integrator (ODI) либо связки Airflow и dbt.
• Опыт проектирования распределённых высоконагруженных систем и понимание подходов к тестированию ETL.
• Знание SQL, pg/SQL и PL/SQL; опыт разработки и оптимизации решений на ClickHouse, включая интеграции с промышленными СУБД и Hadoop.
• Сертификаты по разработке в Greenplum и ClickHouse.

Что важно знать

Задачи охватывают интеграцию, хранение и подготовку данных для BI, поэтому важны и инженерные навыки работы с DWH, и понимание архитектуры распределённых систем. В описании отдельно отмечены сертификаты по Greenplum и ClickHouse.