Аналитик-разработчик претрейна Alice AI LLM
Компания: Яндекс
Локация: Москва
О компании
Яндекс — ведущая IT-компания в России, которая занимается разработкой продуктов в сфере поисковых технологий, машинного обучения и искусственного интеллекта. В её портфолио находятся такие популярные сервисы, как Поиск, Алиса и множество других приложений, которые ежедневно используются миллионами людей. Яндекс активно работает в области машинного обучения и AI, создавая передовые решения и технологии.
Ключевые факты:
- Год основания: 1997
- Более 10 000 сотрудников
- Продукты используются ежедневно более чем 60 миллионов пользователей
- Один из лидеров на рынке AI и ML в России
- Операционная прибыль компании составляет свыше 70 миллиардов рублей в год
О вакансии
Команда Alice AI LLM в Яндексе работает над развитием аналитики претрейн-модели, которая лежит в основе ряда ключевых продуктов компании. Мы стремимся постоянно улучшать качество модели, работая с различными метриками и прикладными задачами. Наша задача — анализировать и оценивать эффективность работы модели на множестве бенчмарков, включая как известные опенсорсные тесты, так и специализированные.
Работа в нашей команде предоставляет возможность взаимодействовать с высококвалифицированными ML-специалистами и использовать мощные GPU-кластеры для запуска новейших моделей. Мы активно внедряем передовые научные исследования и ищем новые подходы к решению задач, стоящих перед нашей моделью.
Чем предстоит заниматься:
- Создавать метрики качества претрейна
- Интерпретировать результаты экспериментов и помогать команде разработки находить решения
- Анализировать проблемы и выявлять точки роста для модели
Что мы предлагаем:
- Расширенная медицинская страховка с первого месяца работы
- Психотерапия в офисе или онлайн-сервисах
- Лазерная коррекция зрения через год работы
- Ведение беременности и роды — через два года
- ДМС для родственников по системе 80/20
- Скидки на фитнес и спортивные клубы
- Гибкий график работы
- Льготные жилищные займы для сотрудников
- Корпоративные мероприятия и спортивные активити
Обязанности
- Разработка метрик для оценки качества претрейн-модели.
- Анализ результатов экспериментов и интерпретация неожиданных данных.
- Выбор сложных задач для дальнейшего анализа и улучшения модели.
Требования
- Alice AI — быстрорастущий проект, у нас можно проявить себя, поработать с крутыми опытными ML-специалистами.
- Можно гонять самые современные модельки Яндекса на мощных GPU-кластерах.
- Можно воспроизводить исследования из самых свежих статей и придумывать что-то новое.
- Мы учимся решать задачи, которые пока никто не умеет решать.
- Наша работа напрямую влияет на то, как современные ML-технологии становятся доступными широкому кругу пользователей.
- Нам помогает команда экспертных AI-тренеров, специализирующихся на сложных срезах данных (медицине, юриспруденции, образовании).
- Работали над метриками в NLP
- Уверенно владеете SQL и Python
- Умеете анализировать данные, строили эффективные процессы их обработки
- Знаете теорию вероятностей и математическую статистику
- Интересуетесь развитием LLM и хотели бы погрузиться в эту тему
- Самостоятельны, аккуратны
- Работали над LLM
- Строили агентские системы
- Делали крауд-разметки с системой контроля качества
- Свободно читаете на английском
- психотерапия в офисе или онлайн-сервисах;
- лазерная коррекция зрения через год работы;
- ведение беременности и роды — через два года.
Условия
- Расширенная медицинская страховка с первого месяца.
- Психотерапия в офисе или онлайн.
- Лазерная коррекция зрения через год работы.
- Ведение беременности и роды — через два года.
- ДМС для родственников по системе 80/20.
- Гибкий график работы.
- Льготные жилищные займы для сотрудников.
- Доступ к спортивным залам и скидки на фитнес-клубы.