Аналитик GPT-моделей в Алису

Компания Яндекс — один из крупнейших интернет-холдингов в России, предлагающий широкий спектр услуг и продуктов, включая поисковую систему, карты, облачные технологии и цифровые ассистенты. Яндекс активно развивает свои AI-проекты и постоянно внедряет новые технологии для улучшения пользовательского опыта.

Среди ключевых продуктов компании — Яндекс.Алиса, голосовой помощник, основанный на передовых алгоритмах машинного обучения и обработке естественного языка. Яндекс занимает лидирующие позиции на рынке IT-услуг в России, обеспечивая миллионы пользователей высококачественными сервисами и инновациями.

Ключевые факты:

• Год основания: 1997
• Более 10 000 сотрудников
• Продукты: Поисковая система Яндекс, Яндекс.Алиса, Яндекс.Маркет и др.
• Более 50 миллионов активных пользователей Яндекс.Алисы в месяц.

В команде Яндекс.Aлисы вы будете заниматься аналитикой GPT-моделей, фокусируясь на метриках качества как для самой Алисы, так и агентов. Основной задачей станет разработка системы офлайн-метрик, которая позволит оценивать качество работы Алисы и адаптировать систему к потребностям пользователей.

Ваша работа также будет связана с обеспечением дополнительных метрик качества для различных агентов, что будет способствовать улучшению взаимодействия с пользователями. Вам предстоит заниматься вопросами памяти и персонализации, что поможет Алисе запоминать предыдущие беседы и повышать удобство общения.

Чем предстоит заниматься:

• Разработка и внедрение офлайн-метрик для оценки качества Алисы
• Формирование пайплайна для оценки данных
• Определение критериев качества для различных задач
• Анализ решений агентских задач и создание продуктовых метрик
• Исследование и работа над вопросами персонализации и памяти Алисы

Что мы предлагаем:

• Работу в одной из ведущих IT-компаний страны
• Доступ к интересным проектам в области AI и аналитики
• Команду профессионалов с возможностями для личного роста и развития.