Аналитик-разработчик в команде еком-агентов

Что за роль

В команде еком-агентов Яндекса открыта позиция аналитика-разработчика. Человек на этой роли будет отвечать за поиск точек роста агентов, а также за разработку и поддержку аналитической системы, которая позволяет оценивать качество работы агентов. Основная цель — доведение изменений до продакшена на основе проведенных экспериментов и анализа данных.

Что предстоит делать

• Искать точки роста, формулировать гипотезы и проводить эксперименты для улучшения сценариев работы агентов.
• Развивать систему оценки качества еком-агентов, проектируя автоматизированные eval-пайплайны.
• Работать с большими объёмами данных, решая проблемы качества данных и собирая датасеты.
• Использовать классические ML-модели, LLM и VLM для достижения результатов.
• Поддерживать систему данных для аналитики еком-агентов, включая витрины и метрики.

Что потребуется

• Уверенное владение Python и SQL.
• Опыт работы с большими объёмами событийных данных и логами.
• Знание пайплайнов обработки данных и инструментов оркестрации.
• Понимание принципов работы LLM-систем и AI-агентов.

Что важно знать

Работа в Яндексе предполагает участие в комьюнити, где есть спортивные клубы и киберспортивное сообщество. Здесь ценят командную работу и открытость к новым идеям.