IG Group

Data Engineer

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Data Engineer в глобальную команду Data & Analytics финтех-компании IG Group. Отвечает за проектирование и поддержку пайплайнов в BigQuery с оркестрацией в Airflow, обеспечивая надёжность данных для аналитики и отчётности.

Задачи

  • Проектировать, строить и поддерживать пайплайны загрузки данных из upstream-систем в BigQuery с оркестрацией в Airflow (Cloud Composer)
  • Развивать платформу данных и пайплайны до глобальной конфигурации с поддержкой нескольких регионов
  • Поддерживать надёжные потоки данных для отчётности Looker и пайплайны для сегментации и кампаний Braze
  • Внедрять проверки качества данных, мониторинг и алертинг, устранять корневые причины инцидентов
  • Работать с Central Data и Engineering над изменениями источников и контрактами данных
  • Вести lineage, документацию пайплайнов и runbooks
  • Ревьюить код и изменения пайплайнов, повышать уровень инженерных практик
  • Оптимизировать стоимость запросов, производительность пайплайнов и CI/CD-процессы

Требования

  • Опыт data engineering и построения production-пайплайнов, которыми пользуются другие
  • Сильный SQL с вниманием к производительности и стоимости, сильный Python для обработки данных и автоматизации, Git
  • Production-опыт с BigQuery и построением, планированием и мониторингом пайплайнов в Airflow (или Cloud Composer)
  • Понимание основ data engineering: паттерны ingestion, ETL/ELT, эволюция схем, контракты данных, CI/CD для data-нагрузок
  • Подход quality-first: тестирование, мониторинг и алертинг по умолчанию, умение объяснять технические компромиссы нетехническим коллегам
  • Желательно: опыт с Google Cloud Platform, стриминговыми или event-driven пайплайнами (Kafka), миграцией или реструктуризацией хранилища, интерес к безопасному применению AI и LLM-инструментов

Условия

  • Конкурентная зарплата
  • Гибкий пакет льгот сверх зарплаты (12%)
  • Частное медицинское страхование для сотрудника и семьи
  • Страхование жизни
  • Компенсация членства в спортзале
  • 25 дней отпуска плюс 1 день на день рождения и 2 дня на волонтёрство (28 всего)
  • Возможность покупать или продавать дни отпуска
  • Комплексный глобальный и локальный онбординг
  • Расширенные выплаты и отпуска по материнству, отцовству и родительские

Навыки

  • SQL
  • Python
  • Git
  • BigQuery
  • Airflow
  • Cloud Composer
  • ETL/ELT
  • CI/CD
  • Google Cloud Platform
  • Kafka
  • Looker
  • Braze

Похожие вакансии

Lead Data Engineer – Spark / Scala - Vice President
CitiLeadBelfastГибрид
9 нояб.
Lead Data Engineer – Spark / Scala - Vice President
CitibankLeadBelfastГибрид
9 нояб.
Lead Data Engineer - UK
SpecsaversLeadFarehamГибрид
9 нояб.
Principal Data Engineer
KingfisherLeadSouthamptonГибрид
9 нояб.
Lead Data Engineer
ITVLeadГибрид
9 нояб.
Data Engineer
HydraBMiddleOxfordГибрид
9 нояб.
Data Engineer
SmarketsMiddleLondonГибрид
9 нояб.
Senior Data Platform Engineer AWS, Spark
ExperianSeniorNottinghamГибрид
9 нояб.
Lead Data Platform Engineer - AWS, Spark
ExperianLeadNottinghamГибрид
9 нояб.
Python Software Engineer - Data Infrastructure
Man GroupMiddleLondonОфис
9 нояб.