Senior AI/ML Engineer

Что за роль

Ваша задача как Senior AI/ML Engineer заключается в повышении качества RAG-агентов в таких направлениях, как поиск по технической документации и бухгалтерской информации. Вы будете заниматься промпт-инжинирингом, подготовкой эталонных наборов оценки качества и настройкой защит для production-агентов.
Что предстоит делать:

• Повышение качества RAG-агентов на трёх направлениях.
• Промпт-инжиниринг и контекст-инжиниринг для всех агентов команды.
• Подготовка эталонных наборов оценки качества.
• Реализация LLM-as-a-judge для автоматических регрессионных проверок.
• A/B-тестирование промптов и моделей.

Что важно знать

Вам предстоит работать в команде, которая активно использует RAG-системы и LLM-фреймворки. Эта роль требует глубоких знаний в области оценки качества LLM-систем и практического опыта работы с защитами для LLM-приложений. Если вы ищете возможность влиять на развитие технологий в области AI и ML, эта позиция будет вам интересна.