Data Engineer / SQL разработчик

Описание роли

На позиции Data Engineer / SQL разработчика в компании LIAN вы будете ключевым специалистом, отвечающим за разработку и поддержку высоконадежных ETL-пайплайнов, которые обеспечивают эффективную обработку и трансформацию данных в распределенной среде. Ваша работа будет направлена на оптимизацию процессов и повышение их производительности, что критически важно для бизнеса. Вы будете использовать современные инструменты и технологии, такие как Apache Airflow и dbt, для управления и автоматизации процессов обработки данных, а также участвовать в разработке решений для аналитики в реальном времени с помощью Apache Flink.

Ваши ключевые задачи:
— Разработка и поддержка надежных ETL-пайплайнов в распределенной среде с использованием open-source стека.
— Управление трансформациями, тестированием и документированием SQL-логики при помощи dbt (Data Build Tool).
— Оркестрация, планирование и мониторинг выполнения задач с использованием Apache Airflow.
— Участие в разработке пайплайнов на Apache Flink для расчетов в реальном времени.
— Оптимизация SQL-кода для повышения производительности запросов и обработки данных.
— Анализ и решение проблем, связанных с производительностью пайплайнов.
— Взаимодействие с командами для понимания бизнес-логики и требований к данным.

Уникальность вакансии

Работа в компании LIAN предлагает вам уникальную возможность стать частью динамичной команды профессионалов в области обработки данных. Вы будете работать с передовыми технологиями и инструментами, что позволит вам развивать свои навыки и повышать свою квалификацию. Компания активно поддерживает сотрудников в их стремлении к обучению и развитию, предлагая доступ к ресурсам и программам, которые помогут вам стать экспертом в своей области. Кроме того, вы получите возможность работать в полностью удаленном формате, что обеспечит вам гибкость и комфорт в работе, не ограничивая ваше время и пространство.

О компании LIAN

LIAN — это ведущая компания в сфере обработки и анализа данных, предлагающая инновационные решения для бизнеса. Мы специализируемся на разработке эффективных ETL-процессов, которые помогают нашим клиентам извлекать максимальную ценность из данных. Наша команда состоит из высококвалифицированных специалистов, которые активно внедряют современные технологии, такие как Apache Airflow и dbt, для оптимизации рабочих процессов. Мы стремимся создавать продуктивную и поддерживающую среду для сотрудников, где каждый может развивать свои навыки и достигать карьерных целей. Наша миссия заключается в том, чтобы помочь бизнесам принимать обоснованные решения на основе данных, обеспечивая высокое качество и надежность наших решений.

Партнёрское размещение. ERID 2W5zFHoQEpH Партнёрское размещение. ERID 2W5zFJWuthw