Аналитик GPT-моделей в Алису
Компания: Яндекс
О компании
Яндекс — одна из крупнейших IT-компаний в России, занимающаяся разработкой интернет-сервисов, включая поисковую систему, видеохостинг и различные AI-решения. Компания активно развивает технологии искусственного интеллекта и предлагает широкий спектр продуктов на российском и международном рынках.
Компании известна своим инновационным подходом к разработке AI-помощников, таких как Алиса, что делает её важным игроком в области высоких технологий.
Ключевые факты:
- Год основания: 1997
- Число сотрудников: более 10 000
- Основные продукты: поиск, карты, электронная почта, облачные технологии, Яндекс.Такси, Яндекс.Маркет
- Активное развитие технологий искусственного интеллекта и машинного обучения
О вакансии
В команде Яндекс работает над развитием систем, связанных с качеством аналитики голосового помощника Алиса. Команда отвечает за создание и внедрение метрик качества для агента, а также за разработку критериев, которые помогут в создании выдающегося продукта.
Ваша задача будет заключаться в улучшении качества решений, обеспечивая дополнительные метрики для оценки задач, выполняемых агентом. Работа включает взаимодействие с данными, которые помогут Алисе стать более персонализированной и отзывчивой к запросам пользователей.
Вы будете вовлечены в проектирование системы офлайн-метрик, создание пайплайнов и установление стандартов для оценки производительности. Наша команда стремится к тому, чтобы Алиса не только отвечала на запросы, но и запоминала взаимодействия, увеличивая тем самым уровень удовлетворенности пользователей.
Чем предстоит заниматься:
- Разработка системы офлайн-метрик качества Алисы
- Создание пайплайнов для оценки производительности системы
- Определение критериев и данных для улучшения качества решений
- Обеспечение качественной рефлексии и памяти Алисы
Что мы предлагаем:
- Работа в команде с профессионалами в области аналитики и AI
- Участие в инновационных проектах, связанных с разработкой AI-помощников
- Возможности для самостоятельных исследований и инициатив в проектах
Обязанности
- Разработка системы офлайн-метрик для Алисы
- Создание пайплайнов оценки качества
- Определение критериев качества и сопутствующих данных
- Обеспечение продуктовых метрик для агентских задач
- Работа над аспектами рефлексии и памяти Алисы