Senior Data Engineer

Компания Джетлин занимается разработкой и внедрением решений в сфере обработки и хранения данных. Ее специализации охватывают широкий спектр технологий для оптимизации данных, что позволяет компаниям эффективно управлять своими информационными потоками и анализировать большие объемы данных.

В компании работают специалисты, посвятившие свою карьеру проектированию архитектур данных и оптимизации процессов обработки. Команда активно использует современные инструменты и методологии, нацеленные на качество и производительность данных.

Ключевые факты:

• Основные направления — обработка и хранение данных
• Оптимизация ETL/ELT-процессов
• Внедрение современных архитектур данных
• Использование новейших технологий в области Data Engineering

В команде данных Джетлин открыта вакансия на должность Senior Data Engineer. Основное направление работы команды сосредоточено на проектировании архитектуры данных и разработке эффективных ETL-пайплайнов. Задачи содержат функции оптимизации хранилищ как OLAP, так и OLTP, что обеспечивает высокую производительность и качество обработки данных.

Команда активно использует инструменты Apache Airflow, Apache Flink и другие современные технологии, способствующие потоковой и пакетной обработке данных. Кроме того, основное внимание в работе уделяется качеству данных и взаимодействию с другими подразделениями, включая разработчиков и тестировщиков.

Чем предстоит заниматься:

• Проектировать архитектуру хранилищ и модели данных
• Разрабатывать DAG и кастомные операторы на Python
• Оптимизировать SQL-запросы и производительность пайплайнов
• Обеспечивать качество данных и реализовывать интеграции
• Вести техническую документацию и следить за задачами в Jira
• Сотрудничать с другими командами для достижения поставленных целей

Что мы предлагаем:

• Участие в интересных проектах в области обработки данных
• Современные технологии и инструменты для работы
• Возможности для повышения квалификации и профессионального роста