Senior LLM Engineer по голосовым AI-агентам

Что за роль

UnimatchLab ищет Senior LLM Engineer для Neybo — голосового AI-компаньона для детей. Задача специалиста — вести облачный голосовой конвейер от распознавания речи до генерации ответа и синтеза голоса, уделяя особое внимание задержке, устойчивости потоковой обработки и безопасности контента.

Что предстоит делать

• Развивать потоковый конвейер STT, LLM и TTS: настраивать barge-in, передачу токенов в синтез речи, таймауты и переключение между провайдерами.
• Настраивать определение конца фразы с учётом длительных пауз в детской речи; исходный ориентир порога тишины — 1,5–3 секунды.
• Оптимизировать сквозную задержку и отслеживать её по перцентилям, включая p50 и p90.
• Создать стенд оценки детской речи с автоматическими прогонами и метриками качества распознавания и времени отклика.
• Разработать каскад безопасности для чувствительной аудитории и механизм обновления правил без выпуска прошивки.
• Формировать ответы на основе проверенного контента с помощью RAG, шаблонов и tool calling.
• Настроить трассировку, учёт стоимости сессий и режим zero retention у провайдеров.

Что потребуется

• От четырёх лет опыта в ML/LLM, включая не менее полутора лет работы с голосовыми агентами в production.
• Практический опыт потоковых каскадов с barge-in и fallback; знакомство с Pipecat, LiveKit Agents или аналогами.
• Навыки оптимизации задержки по перцентилям, работы с WER и TTFT, понимание юнит-экономики STT/TTS.
• Опыт настройки guardrails и классификации безопасности для чувствительной аудитории.
• Знание Python и async, опыт работы с WebSocket или WebRTC, Docker и облачной инфраструктурой.
• Английский язык на уровне B2 или выше.

Что важно знать

Дополнительным преимуществом будут опыт с детскими или образовательными продуктами, знание COPPA, PRIVO или kidSAFE, работа с детской либо акцентной речью и арабским в STT/TTS. Также приветствуется опыт с AEC, аудиостримингом на Linux-устройствах и speech-to-speech. Вакансия сочетает разработку голосовых AI-систем с задачами оценки качества и защиты контента для детской аудитории.