Databricks Data Engineer (m/w/d)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Data Engineer в консалтинговую компанию Devoteam для проектирования и оптимизации масштабируемых пайплайнов данных на платформе Databricks и Spark с интеграцией в облачные сервисы.

Задачи

• Проектирование, разработка и оптимизация производительности масштабируемых пайплайнов данных с Databricks и Spark
• Оркестрация сложных workflow и обеспечение качества данных через Databricks SQL, Delta Lake и Workflows
• Интеграция с облачными сервисами (Azure, AWS, GCP) для хранения, вычислений и безопасности
• Проектирование моделей данных для Data Lakes и Data Warehouses
• Внедрение процедур тестирования и валидации для соблюдения стандартов качества и governance
• Взаимодействие с Data Scientists, аналитиками и бизнес-подразделениями
• Постоянное изучение новых возможностей Databricks и облачных технологий

Требования

• Минимум 3 года опыта в Data Engineering и разработке архитектур данных
• Уверенное владение Python или Scala, PySpark / Apache Spark и SQL
• Практический опыт с платформой Databricks (включая Delta Lake, Medallion-архитектуру)
• Опыт работы с облачными средами (AWS, Azure или GCP)
• Понимание принципов Data Warehousing, ETL, моделирования данных и СУБД
• Продвинутый SQL для запросов, трансформаций и анализа данных
• Немецкий язык не ниже C1, английский не ниже B2

Условия

• Современные офисы в центре Мюнхена и Франкфурта
• Гибридный формат работы с гибким графиком
• Обучение в Devoteam Academy: сертифицированные тренинги и языковые курсы
• Международные возможности развития карьеры
• Корпоративные мероприятия и тимбилдинги
• Бонусы за рекомендацию сотрудников
• Современное IT-оборудование на выбор
• Corporate Benefits с большим выбором предложений

Навыки

• Databricks
• Spark
• PySpark
• Python
• Scala
• SQL
• Delta Lake
• Databricks SQL
• Databricks Workflows
• AWS
• Azure
• GCP
• ETL
• Data Warehousing
• Medallion Architecture