IG Group
Data Engineer
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Data Engineer в глобальную команду Data & Analytics финтех-компании IG Group. Отвечает за проектирование и поддержку пайплайнов в BigQuery с оркестрацией в Airflow, обеспечивая надёжность данных для аналитики и отчётности.
Задачи
- Проектировать, строить и поддерживать пайплайны загрузки данных из upstream-систем в BigQuery с оркестрацией в Airflow (Cloud Composer)
- Развивать платформу данных и пайплайны до глобальной конфигурации с поддержкой нескольких регионов
- Поддерживать надёжные потоки данных для отчётности Looker и пайплайны для сегментации и кампаний Braze
- Внедрять проверки качества данных, мониторинг и алертинг, устранять корневые причины инцидентов
- Работать с Central Data и Engineering над изменениями источников и контрактами данных
- Вести lineage, документацию пайплайнов и runbooks
- Ревьюить код и изменения пайплайнов, повышать уровень инженерных практик
- Оптимизировать стоимость запросов, производительность пайплайнов и CI/CD-процессы
Требования
- Опыт data engineering и построения production-пайплайнов, которыми пользуются другие
- Сильный SQL с вниманием к производительности и стоимости, сильный Python для обработки данных и автоматизации, Git
- Production-опыт с BigQuery и построением, планированием и мониторингом пайплайнов в Airflow (или Cloud Composer)
- Понимание основ data engineering: паттерны ingestion, ETL/ELT, эволюция схем, контракты данных, CI/CD для data-нагрузок
- Подход quality-first: тестирование, мониторинг и алертинг по умолчанию, умение объяснять технические компромиссы нетехническим коллегам
- Желательно: опыт с Google Cloud Platform, стриминговыми или event-driven пайплайнами (Kafka), миграцией или реструктуризацией хранилища, интерес к безопасному применению AI и LLM-инструментов
Условия
- Конкурентная зарплата
- Гибкий пакет льгот сверх зарплаты (12%)
- Частное медицинское страхование для сотрудника и семьи
- Страхование жизни
- Компенсация членства в спортзале
- 25 дней отпуска плюс 1 день на день рождения и 2 дня на волонтёрство (28 всего)
- Возможность покупать или продавать дни отпуска
- Комплексный глобальный и локальный онбординг
- Расширенные выплаты и отпуска по материнству, отцовству и родительские
Навыки
- SQL
- Python
- Git
- BigQuery
- Airflow
- Cloud Composer
- ETL/ELT
- CI/CD
- Google Cloud Platform
- Kafka
- Looker
- Braze