DATA ENGINEER*IN (m/w/d)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Data Engineer в команду Data & Automation компании OMR. Отвечает за ELT-инфраструктуру, Airflow-пайплайны и BigQuery, обеспечивая надёжность данных для всех бизнес-юнитов.

Задачи

• Отвечать за ELT-инфраструктуру, разрабатывать, эксплуатировать и мониторить Airflow-DAGs на Cloud Composer, управлять коннекторами (Airbyte, Fivetran)
• Разрабатывать собственные Airflow-операторы для источников без стандартных коннекторов и подключать новые источники к Data Warehouse (более 28 внешних систем)
• Эксплуатировать и оптимизировать инфраструктуру BigQuery: performance-tuning, партиционирование и кластеризация, мониторинг стоимости запросов, управление схемами в Raw Zone
• Обеспечивать Data Reliability: строить мониторинг и алертинг, поддерживать проверки свежести источников, выявлять сбои пайплайнов до того, как их заметят бизнес-юниты
• Развивать CI/CD-пайплайны (GitHub Actions) для ingestion и dbt, участвовать в code review
• Закладывать инфраструктурный фундамент для стратегических дата-проектов, например центральной Audience-платформы, предлагать идеи по архитектуре и тулингу

Требования

• Многолетний опыт в Data Engineering, опыт ответственности за ELT/ETL-пайплайны и оркестрацию данных в продакшене
• Уверенное владение Python и SQL, глубокий опыт с Airflow или Cloud Composer
• Знание BigQuery (производительность, стоимость, права доступа) и основ GCP (IAM, Cloud Storage, желательно Workload Identity Federation)
• Желательно опыт с dbt, Fivetran или Airbyte, а также с Docker, Terraform или Cloud Monitoring
• Инициативность, структурированный подход, готовность нести полную ответственность за бизнес-критичную инфраструктуру
• Свободный немецкий и хороший английский (устно и письменно)

Условия

• Работа в одном из самых интересных немецких медиакомпаний
• Комфортный офис с регулируемыми столами, массажными креслами, мини-залом, летней террасой в гамбургском Шанценфиртель
• Свежая еда от campus-команды, большой выбор мюсли и напитков
• Корпоративный фитнес через EGYM Wellpass, предложения по ментальному здоровью от nilo и корпоративная пенсия
• Гибкий график и heycare для ухода за детьми, питомцами или родственниками
• Лизинг велосипеда, дотация на HVV Proficard, JobAuto и скидки на партнёрские продукты
• Доступ ко всем образовательным форматам OMR и быстрый рост в цифровых темах
• Возможность нетворкинга с игроками цифровой сцены через OMR Kosmos

Навыки

• Python
• SQL
• Airflow
• Cloud Composer
• BigQuery
• GCP
• IAM
• Cloud Storage
• Workload Identity Federation
• dbt
• Fivetran
• Airbyte
• Docker
• Terraform
• Cloud Monitoring
• GitHub Actions
• ELT
• ETL