Melon Fashion Group

Инженер данных мастер-систем / Data Engineer

Санкт-Петербург (Балтийская)Удалённоremotesenior

Загрузи резюме, чтобы повысить шансы пройти на вакансию «Инженер данных мастер-систем / Data Engineer»Разберём резюме ИИ и покажем, что доработать — здесь же, не уходя со страницы

О компании

Melon Fashion Group — это компания, занимающаяся производством и продажей модной одежды и аксессуаров. Она активно развивает свою онлайн и офлайн торговлю, предлагая широкий ассортимент товаров. Компания имеет хорошую репутацию на рынке и стремится внедрять современные технологии для оптимизации своего бизнеса.

Ключевые факты:

  • Год основания: 2001
  • Количество сотрудников: более 3,000
  • Разнообразие брендов: от молодежной до премиум одежды
  • Развивает собственные интернет-магазины и физическиеRetail точек
  • Участвует в социальных и экологических инициативах

О вакансии

В Melon Fashion Group формируется новое направление, связанное с мастер-данными, и в связи с этим открыта позиция инженера данных. Команда занимается проектированием операционных хранилищ и разработкой интеграционных процессов, что позволяет обеспечить высокое качество и консистентность данных.

Инженер данных будет отвечать за проектирование структур мастер-данных, разработку ETL- и ELT-процессов, а также за настройку мониторинга и анализ интеграционных процессов. Работа включает взаимодействие с различными системами, что требует глубокого понимания принципов пакетной и потоковой обработки данных.

Позиция предполагает активное участие в выборе технологий и архитектурных решений для дальнейшего масштаба механизмов обработки данных.

Чем предстоит заниматься:

  • Проектировать структуры операционных хранилищ и модели мастер-данных.
  • Разрабатывать процессы загрузки, обработки, хранения и передачи данных.
  • Создавать пакетные и потоковые интеграции между информационными системами.
  • Настраивать получение изменений из систем-источников, включая CDC-механизмы.
  • Реализовывать правила нормализации, сопоставления, дедупликации и консолидации данных.
  • Обеспечивать хранение истории изменений мастер-данных.
  • Готовить данные для передачи в DWH и другие системы-потребители.
  • Разрабатывать проверки качества данных, технические и бизнес-сверки.
  • Настраивать мониторинг, логирование и обработку ошибок.
  • Участвовать в выборе архитектурных и технологических решений.
  • Сопровождать и развивать разработанные решения в промышленной эксплуатации.

Что мы предлагаем:

  • Конкурентоспособный уровень заработной платы.
  • Возможности для карьерного роста и развития.
  • Современные инструменты и технологии для работы.
  • Гибкий график работы и возможность удаленной занятости.
Навыки
PostgreSQLSQLPythonGitKafkaCI/CDClickHouseAPIApache Airflow

Обязанности

  • Проектировать хранилища и модели мастер-данных
  • Разрабатывать процессы обработки данных
  • Создавать интеграционные потоки между системами
  • Настраивать CDC для получения изменений
  • Реализовывать нормализацию и дедупликацию данных
  • Обеспечивать хранение истории изменений
  • Готовить данные для передачи в DWH
  • Разрабатывать проверки качества данных
  • Настраивать мониторинг и логирование
  • Анализировать причины сбоя в процессах

Похожие вакансии

Как получить эту работу — с ИИ-помощником РаботаМакс

Бесплатно поможем на каждом шаге. Нажмите, чтобы раскрыть.