Data Engineer

WorldwideУдалённоremotesenior

Загрузи резюме, чтобы повысить шансы пройти на вакансию «Data Engineer»Разберём резюме ИИ и покажем, что доработать — здесь же, не уходя со страницы

О компании

Мы представляем собой мирового лидера в области финансовых технологий, занимающегося разработкой решений, которые помогают компаниям оптимизировать свои бизнес-процессы. Наша команда разрабатывает платформы, которые обеспечивают надежный поток данных для торговли и исследований. Мы акцентируем внимание на высоких стандартах в области обработки и анализа больших объемов данных.

Ключевые факты:

  • Глобальное присутствие
  • Платформы для торговли и анализа данных
  • Команда из профессионалов в своей области
  • Инновационные решения для рынков

О вакансии

Команда Data Engineering отвечает за проектирование, создание и поддержку платформы рыночных данных, обеспечивая надежную инфраструктуру для обработки данных в осуществлении торговли в реальном времени и проведении исследований. Мы стремимся к тому, чтобы у членов команды была возможность развиваться и увеличивать свои навыки в работе с современными технологиями в области обработки данных.

Внутри команды вы будете работать с полным циклом захвата данных, начиная от кодирования и нормализации данных с бирж и захватов, а также разрабатывать пакеты для обработки данных, используя такие инструменты, как Apache Airflow и Spark. Вы получите уникальную возможность влиять на проектирование хранилищ данных на основе Apache Iceberg с акцентом на эффективное использование ресурсов и оптимизацию затрат на хранение.

Вы будете сотрудничать с командами Quant Research, Data Science и DevOps, чтобы обеспечить высокое качество данных и надежность инфраструктуры для достижения максимальной эффективности. Ваши действия будут направлены на создание стандартов и лучших практик в области прикладного анализа данных.

Навыки
Apache AirflowApache SparkPythonPolarsPySparkSQLApache ArrowDockerKubernetesApache Iceberg

Обязанности

  • Управление полным процессом захвата данных от биржи до хранения в lakehouse.
  • Создание и поддержка конвейеров данных для работы с данными во время торговли.
  • Проектирование и оптимизация структуры хранения в Apache Iceberg.
  • Разработка библиотек для управления схемами и проверки данных.
  • Внедрение мониторинга и качественных показателей для работы с данными.
  • Сотрудничество с другими командами для реализации требований платформы.

Условия

  • Полностью удаленная работа с ежедневным перекрытием с 12:00 до 18:00 GMT+3.
  • Компенсация затрат на медицинскую страховку, спорт и личное развитие.
  • Плоская структура управления и возможность самореализации.
  • Перспективы для роста роли по мере масштабирования команды.

Похожие вакансии

Как получить эту работу — с ИИ-помощником РаботаМакс

Бесплатно поможем на каждом шаге. Нажмите, чтобы раскрыть.

Помощники с ИИ