Главный разработчик ML / MLOps

Компания Магнит является одной из крупнейших розничных сетей в России, предлагая широкий ассортимент товаров и услуг. Мы активно развиваем ML-платформу для прогнозирования спроса, что позволяет более эффективно управлять запасами товаров и улучшать клиентский опыт. Обработка больших объемов данных и применение современных технологий являются приоритетами в нашей работе.

Ключевые факты:

• Федеративная розничная сеть
• Обработка петабайтов данных
• Современная ML-платформа
• Использование Spark и Kubernetes
• Доступные офисы в Москве, Санкт-Петербурге и Иннополисе

Наша команда занимается разработкой и внедрением ML-платформы для прогнозирования потребительского спроса в магазине. Мы фокусируемся на обработке и анализе терабайтов данных, что требует высокой степени оптимизации и надежности системы.

В рамках роли главного разработчика ML / MLOps вы будете интегрировать ML-алгоритмы и обновления от Data Science в производственные процессы. Также вам предстоит развивать MLOps-фреймворк, который обеспечит эффективные разработки и тестирования на всех этапах — от DEV до PROD.

Вы будете взаимодействовать с Kubernetes и Apache Airflow, оптимизировать сценарии обработки с помощью Spark, а также развивать внутренние инструменты и CI/CD для ML-платформы. Ваша работа будет напрямую влиять на производительность и надежность системы, поэтому важными аспектами будут мониторинг и управление качеством данных.

Чем предстоит заниматься:

• Интеграция новых ML-алгоритмов в производственные процессы
• Развитие MLOps-фреймворка и процессов разработки
• Сопровождение расчетных пайплайнов в Apache Airflow
• Оптимизация и масштабирование Spark-расчетов
• Работа с Kubernetes-инфраструктурой под Spark-приложения
• Развитие мониторинга, логирования и инструментов диагностики
• Управление жизненным циклом данных в S3 и Delta Lake
• Внедрение новых технологий для повышения надежности платформы

Что мы предлагаем:

• Оформление в аккредитованную ИТ-компанию
• ДМС со стоматологией и льготные условия для членов семьи
• Техника для работы
• График 5/2
• Уютный офис в центре Москвы или удаленно
• Поддержка обучения на курсах и участие в конференциях
• Возможности для участия в митапах и хакатонах
• Корпоративные скидки и программы лояльности
• Возможность участия в реферальной программе