AI/ML Engineer

Москваfullsenior

Загрузи резюме, чтобы повысить шансы пройти на вакансию «AI/ML Engineer»Разберём резюме ИИ и покажем, что доработать — здесь же, не уходя со страницы

О компании

СберСпасибо — это часть компании Сбер, занимающаяся разработкой и внедрением AI-агентов. Мы создаем продвинутые RAG-системы для оптимизации поиска по внутренней документации и развиваем инструменты для повышения эффективности работы. Наша команда активно работает над инжинирингом AI-решений, которые помогают в различных сферах бизнеса.

Ключевые факты:

  • Часть компании Сбер
  • Разработка корпоративных AI-агентов
  • Специализация на RAG-системах
  • Фокус на улучшении поиска по документации
  • Работа в динамично развивающейся среде

О вакансии

В нашей команде вы займётесь повышением качества RAG-агентов, работая над тремя направлениями: техническая документация, нормативная и бухгалтерская база. Ваши усилия будут направлены на промпт-инжиниринг и контекст-инжиниринг для всех агентов, а также на подготовку эталонных наборов для оценки качества.

Вы будете реализовывать методологии для автоматических регрессионных проверок, а также настраивать защитные механизмы для production-агентов. A/B-тестирование моделей и промптов также будет частью ваших задач для оптимизации конфигураций.

Если вас интересует создание надёжных и полезных AI-решений, мы будем рады видеть вас в нашей команде!

Чем предстоит заниматься:

  • Повышение качества RAG-агентов на трёх направлениях: поиск по технической документации, по нормативной базе, по бухгалтерской документации
  • Промпт-инжиниринг и контекст-инжиниринг для всех агентов команды
  • Подготовка эталонных наборов оценки качества
  • Реализация LLM-as-a-judge как методологии автоматических регрессионных проверок
  • Настройка защит для production-агентов: фильтры от инъекций в промпт, валидация структуры и контента выходов, защита от утечек ПДн, anti-hallucination механизмы
  • A/B-тестирование промптов и моделей для подбора лучших конфигураций
  • Тюнинг качества по сигналам обратной связи пользователей и трассировкам из Langfuse

Что мы предлагаем:

  • Интересные проекты с использованием передовых технологий
  • Дружеская атмосфера в команде
  • Возможности для профессионального роста и обмена опытом
Навыки
RESTБазы данныхPythonSQL

Обязанности

  • Улучшение RAG-агентов по трем ключевым направлениям
  • Промпт-инжиниринг для всех командных агентов
  • Подготовка эталонных наборов для оценки качества
  • Реализация методологии LLM-as-a-judge
  • Настройка защитных механизмов для production-агентов
  • A/B-тестирование промптов и моделей
  • Оптимизация качества на основе обратной связи пользователей

Похожие вакансии

Как получить эту работу — с ИИ-помощником РаботаМакс

Бесплатно поможем на каждом шаге. Нажмите, чтобы раскрыть.