Инженер данных
Компания: Альфа-Банк
Локация: Москва
О компании
Альфа-Банк — один из крупнейших финансовых институтов России, активно работающий на рынке банковских услуг. Компания предлагает широкий спектр продуктов, включая кредитование, инвестиционные решения и управление активами, благодаря чему заняла устойчивые позиции в отрасли.
Ключевые факты:
- Основан в 1990 году
- Более 16 миллионов клиентов
- Присутствие в 20 странах
- Широкий ассортимент финансовых продуктов и услуг
- Более 27 тысяч сотрудников
О вакансии
Команда инженеров данных в Альфа-Банке занимается разработкой высоконагруженных конвейеров обработки данных, что обеспечивает надежность и непрерывность репликации информации из различных систем банка. Основная задача группы — подготовка данных для аналитических хранилищ, включая DataLake и FeatureStore, чтобы поддерживать развитие моделей машинного обучения.
В рамках своей работы команда также осуществляет код-ревью, разрабатывает подробную документацию и контролирует статус выполнения задач с помощью Jira. Это сотрудничество позволяет создавать и поддерживать качественные решения на основе данных.
Чем предстоит заниматься:
- Реализовать высоконагруженные конвейеры обработки данных
- Подготовить данные в аналитических хранилищах для моделей машинного обучения
- Обеспечить актуальность документации по разработанному функционалу
- Управлять статусами задач в Jira
- Проверить качество кода других инженеров
Что мы предлагаем:
- Стабильный и прозрачный доход, размер обсуждается по итогам собеседования
- Пятидневная рабочая неделя: с 9:00 до 18:00
- Доступ к тренингам, вебинарам и корпоративным библиотекам
- Возможности карьерного роста с понятными условиями повышения
- Программа ДМС, включая стоматологию и обслуживание в лучших клиниках
- Скидки на абонементы в фитнес-клубы и разнообразные сервисы для досуга
Обязанности
- Создавать высоконагруженные конвейеры обработки данных
- Готовить данные для аналитических хранилищ
- Поддерживать актуальность документации по функционалу
- Своевременно обновлять статусы задач в Jira
- Осуществлять проверку качества кода
Требования
- Всё о работе
- Приведи друга
- Реализация высоконагруженных конвейеров обработки данных для обеспечения надежной и бесперебойной репликации данных из ИТ-систем Банка.
- Реализация комплексных задач по подготовке данных в целевых аналитических хранилищах (DataLake, SandBox, FeatureStore) для построения признаков, необходимых для разработки моделей машинного обучения.
- Разработка и поддержание в актуальном состоянии документации по разработанному функционалу.
- Своевременное отражение статуса выполнения задач в Jira.
- Проверка качества кода (код-ревью), написанного инженерами и младшими инженерами данных.
- Python - уверенное знание структур данных и алгоритмов, эффективное применение принципов ООП и ФП (Функциональное программирование), опыт написания модульных и интеграционных тестов, знание и опыт применения библиотек обработки и анализа данных - numpy, pandas
- Опыт разработки и внедрения в промышленную эксплуатацию сервисов загрузки и обработки неструктурированных и слабо структурированных данных (текст, xml, json) из внешних источников.
- Способность разобраться с API поставщиков данных, используя доступную документацию.
- SQL - умение создавать сложные запросы с использованием аналитических оконных функций и использовать инструменты профилирования для оптимизации их производительности, опыт работы с БД Oracle, Postgres, Greenplum.
- Уверенное знание и опыт работы с инструментами разработки, планирования и мониторинга рабочих процессов (workflow engines) пакетной обработки данных.
- Airflow- Опыт разработки сложных, высоконагруженных приложений обработки данных на основе PySpark, уверенное знание настроек Spark и их влияния на производительность приложений Spark.
- Стабильный и прозрачный доход: размер заработной платы обсуждается по итогам собеседования;
- Пятидневная рабочая неделя: с 9. 00 до 18.
- Среда для твоего неизбежного развития: тебя ждут сложные и интересные задачи с использованием большого массива данных, у нас регулярно проходят тренинги, вебинары, у тебя будет доступ к бесплатным - корпоративным библиотекам Альпины и бизнес - изданий, скидки на курсы иностранных языков;
- Карьерный рост: ты будешь понимать, что нужно сделать для перехода на другой уровень;
- Чувство локтя: у нас дружелюбная атмосфера и команда лучших профессионалов, которые готовы делиться с тобой экспертизой;
- Забота о твоем здоровье: программа ДМС, куда входит стоматология и обслуживание в лучших клиниках города, скидки на абонементы в фитнес-клубы, неформальные спортивные сообщества;
- Возможности для разнообразного досуга: скидки на услуги туристических агентств, продукты питания, в рестораны и бары, в магазины и салоны красоты.
Условия
- Стабильный и прозрачный доход, размер обсуждается по итогам собеседования
- Пятидневная рабочая неделя: с 9:00 до 18:00
- Доступ к тренингам и корпоративным библиотекам
- Программа ДМС с стоматологией и обслуживанием в лучших клиниках
- Скидки на абонементы в фитнес-клубы и туристические услуги