Разработчик LLM

Компания Алабуга представляет собой ключевого игрока в области специальных экономических зон в России, расположенную в Елабужском районе Татарстана. Она сосредоточена на создании мощной инфраструктуры для поддержки высоких технологий и инновационных проектов.

Среди её целей — привлечение современных технологий и создание благоприятной среды для бизнеса. Алабуга активно ищет талантливых специалистов, которые помогут в развитии компании и отрасли в целом.

Ключевые факты:

• Крупнейшая особая экономическая зона в Европе
• Местоположение в Татарстане
• Поддержка высоких технологий и инноваций

В команде Алабуга вы получите возможность работать над проектами, связанными с разработкой моделей большого языка (LLM). Ваша работа будет включать проектирование архитектуры LLM и выбор базовой модели для нужд конкретного проекта. Вы будете участвовать в создании и обучении моделей, как с нуля, так и через дообучение с использованием таких методов, как SFT, LoRA и PEFT.

Команда активно работает над подготовкой и очисткой датасетов, а также формированием instruction-данных для обучения моделей. Вы будете реализовывать пайплайны на базе PyTorch и оптимизировать модели для достижения лучших показателей производительности.

Чем предстоит заниматься:

• Проектирование архитектуры LLM и выбор моделей
• Создание и обучение моделей с нуля и дообучение
• Подготовка и разметка датасетов
• Запуск пайплайнов обучения на PyTorch
• Оптимизация моделей для снижения latency и повышения эффективности
• Интеграция LLM с API через function/tool calling

Что мы предлагаем:

• Дневная рабочая неделя, ненормированный рабочий график
• Транспорт от ближайших городов до места работы
• Возможность релокации в Республику Татарстан
• Конкурентный уровень зарплаты
• Работа в стабильной компании с развитой инфраструктурой