Data Engineer по BigQuery / GCP

Что за роль

Ищем опытного Data Engineer для работы над глобальной финансовой платформой данных и современной облачной экосистемой данных. Роль предполагает разработку и поддержку ETL/ELT пайплайнов, а также оптимизацию производительности BigQuery.

Что предстоит делать:
• Разрабатывать и поддерживать пайплайны Bronze → Silver → Gold
• Интегрировать данные из APIs, SFTP и баз данных в BigQuery
• Разрабатывать transformation logic и curated data marts
• Реализовывать проверки качества и валидации данных
• Настраивать orchestration через Airflow
• Оптимизировать производительность и стоимость BigQuery
• Участвовать в миграции с устаревших систем
• Поддерживать мониторинг, оповещения и наблюдаемость процессов

Что важно знать

Проект ориентирован на создание глобальной финансовой платформы данных с использованием BigQuery и облачной архитектуры ELT. Это возможность работать с современными технологиями в высоконагруженной среде, что позволит значительно развить ваши навыки в области обработки больших данных и облачных решений.