Senior Data Engineer (m/f/d)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Senior Data Engineer в европейскую e-pharmacy Redcare Pharmacy. Задача — строить масштабируемые data pipelines и архитектуры данных для Data & AI инициатив на Azure.

Задачи

• Проектировать и строить масштабируемые data pipelines для data-продуктов в разных бизнес-доменах
• Участвовать в миграции данных в облако и модернизации платформ с переходом на Azure
• Трансформировать и оптимизировать большие наборы данных для отчётности, аналитики и принятия решений
• Тесно взаимодействовать с Data Analysts, ML Engineers, DevOps Engineers, Backend Developers, Product Managers и бизнес-заказчиками
• Развивать инженерные практики: чистый поддерживаемый код, автоматизацию и непрерывные улучшения data-платформы

Требования

• 5+ лет опыта в Data Engineering
• Опыт работы с data-платформами, моделированием данных и production-grade data pipelines
• Сильные навыки Python и SQL
• Опыт проектирования и поддержки распределённых систем обработки данных, например Databricks
• Опыт работы с большими данными, data lakes, data warehouses и архитектурами ETL/ELT
• Опыт с Azure (предпочтительно), AWS или GCP
• Понимание scalable system design и лучших практик data engineering
• Знание Lakehouse-технологий: Apache Delta, Iceberg, Hudi
• Опыт работы с реляционными БД (PostgreSQL, SQL Server, Oracle)
• Построение моделей трансформации с помощью DBT
• Понимание принципов DevOps и автоматизированных CI/CD pipelines
• Сильные навыки решения проблем, ownership и консультативный подход, умение работать самостоятельно в быстро меняющейся среде

Условия

• Удалённая работа с возможностью работать до 20 дней в году из любой точки ЕС
• Возможна периодическая работа в офисах в Берлине или Кёльне по необходимости
• Командировки и тимбилдинги, корпоративные мероприятия
• Грант на детский сад 100 € в месяц
• Бесплатная анонимная психологическая помощь через nilo
• Внутреннее и внешнее обучение для профессионального развития
• Полностью оплаченный Deutschland Ticket
• Членство в Urban Sports Club (пакет M)

Навыки

• Azure Fabric
• Azure Databricks
• PySpark
• Apache Spark
• Python
• SQL
• Azure Data Platform
• DBT
• Snowflake
• Docker
• Kubernetes
• Data Modeling
• ETL/ELT
• AWS
• GCP
• Apache Delta
• Iceberg
• Hudi
• PostgreSQL
• SQL Server
• Oracle
• CI/CD
• DevOps