Ведущий инженер данных в VK Видео, Москва
Компания: VK
Локация: Москва
О компании
VK представляет собой одну из ведущих IT-компаний в России, которая активно развивает широкий спектр онлайн-сервисов. Основное внимание уделяется социальным сетям, видеоконтенту и мессенджерам, что позволяет компании занимать сильные позиции на рынке.
VK вкладывает значительные ресурсы в исследования и разработки, что способствует созданию инновационных продуктов и улучшению пользовательского опыта.
Ключевые факты:
- Год основания: 2006
- Количество сотрудников: более 4,500
- Основные продукты: VK, VK Video, VK Messenger
- Рынок: социальные сети, видеостриминг, мессенджеры
- Место на рынке: одна из крупнейших социальных платформ в России
О вакансии
Команда, в которой открыта вакансия, занимается обработкой и доставкой данных для аналитических и машинно-обучающих команд VK. Основная задача — разработка эффективных процессов для работы с данными, что критически важно для успешного функционирования аналитики и научных исследований в компании.
В должностные обязанности входит создание витрин данных, оптимизация существующих процессов, а также написание адхоков и выгрузок с дальнейшим дебагом. Успешный кандидат должен успешно взаимодействовать с параллельными вычислениями на кластере, что требует глубокого понимания современных технологий в области обработки данных.
Чем предстоит заниматься:
- Разработка и поддержка процессов обработки и доставки данных для аналитических и ML команд
- Сбор витрин данных и оптимизация процессинга
- Написание адхоков, выгрузок и дебаггинг
- Сбор требований к системам обработки данных
- Работа с параллельными вычислениями на кластере
Что мы предлагаем:
- Работа в одной из ведущих IT-компаний России
- Современный офис в центре Москвы
- Доступ к передовым технологиям и инструментам
Обязанности
- Разрабатывать и поддерживать процессы обработки и доставки данных для аналитических и ML команд
- Собирать витрины данных и оптимизировать их
- Писать адхоки и выполнять выгрузки
- Производить дебаггинг кода
- Собирать требования от пользователей и заказчиков
Требования
- О компании VK Экскурсия по офису в Москве
- Экскурсия по офису в Москве
- Проекты Проекты OpenVK Секреты цифровой доступности
- Секреты цифровой доступности
- Кандидатам Как попасть в команду Стажировка в VK Условия работы
- Как попасть в команду
- Стажировка в VK
- Условия работы
- Разрабатывать и поддерживать процессы обработки и доставки данных для аналитических и ML команд
- Собирать витрины, оптимизировать
- Писать адхоки и выгрузки, раздебаги
- Собирать требования
- Понимание работы параллельных вычислений на кластере
- Опыт с Airflow, Spark, Hadoop, ClickHouse, YT (опционально)
- Знание Python: алгосы базовые (для понимания оптимального кода), классы и прочий сложный код (для чтения исходников и создания велосипедов типа операторов/сервисов)
- Знание Git и работа с кодом в команде (ревью)