Лид ML-аналитики

Что за роль

Лид ML-аналитики отвечает за развитие аналитики качества AI-продуктов и ML-систем в компании, создающей инновационные AI-сервисы. Основная задача заключается в построении системы метрик и улучшении процессов оценки качества, что позволит командам быстрее и безопаснее запускать изменения в продуктах.

Что предстоит делать

• Развивать аналитику качества LLM, искать способы измерять качество моделей и AI-сценариев
• Выстраивать процессы ML-аналитики, включая ручную разметку и автоматические проверки
• Работать с несколькими AI-сервисами, включая Нейроюриста и Нейросаппорт
• Управлять командой ML-аналитиков, помогать им развиваться и создавать сильную культуру аналитики

Что потребуется

• Опыт руководства аналитиками или quality-направлениями
• Навыки построения метрик качества для AI-систем
• Уверенное владение SQL и Python

Что важно знать

Компания предлагает ДМС с первого месяца работы, включая возможность получать помощь за границей, что делает работу более комфортной для сотрудников, которые любят путешествовать.