Data Scientist в области языковых моделей (Middle)

Описание вакансии

Мы ищем Data Scientist в области языковых моделей. Основная задача — сбор и предобработка текстовых данных для обучения моделей, создание пайплайнов и проведение экспериментов.

Обязанности

• Сбор, предобработка и анализ текстовых данных для обучения моделей.
• Помощь в дообучении языковых моделей (LLM) под специфические задачи.
• Разработка пайплайнов для подготовки текстовых данных, включая очистку, токенизацию.
• Проведение экспериментов с различными моделями и конфигурациями.
• Создание отчетов о результатах экспериментов.

Требования

• Опыт работы с текстовыми данными, включая предобработку.
• Уверенные знания Python и библиотек для обработки текста.
• Опыт работы с крупными текстовыми датасетами.