Databricks Data Engineer (m/w/d)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Data Engineer в консалтинговую компанию Devoteam для проектирования и оптимизации дата-пайплайнов на платформе Databricks в облачных средах.

Задачи

• Проектирование, разработка и оптимизация производительности масштабируемых дата-пайплайнов на Databricks и Spark
• Оркестрация сложных workflow и обеспечение качества данных с помощью Databricks SQL, Delta Lake и Workflows
• Интеграция с облачными сервисами (Azure, AWS, GCP) для хранения, вычислений и безопасности
• Проектирование стабильных моделей данных для Data Lakes и Data Warehouses
• Внедрение процедур тестирования и валидации для соблюдения стандартов качества и governance
• Взаимодействие с Data Scientists, аналитиками и бизнес-подразделениями
• Постоянное изучение новых возможностей Databricks и облачных технологий

Требования

• Минимум 3 года опыта в Data Engineering и разработке архитектур данных
• Уверенное знание Python или Scala, PySpark / Apache Spark и SQL
• Практический опыт с платформой Databricks (включая Delta Lake, Medallion-архитектуру)
• Опыт работы с облачными средами AWS, Azure или GCP
• Понимание принципов Data Warehousing, ETL-процессов, моделирования данных и СУБД
• Продвинутый SQL для запросов, трансформаций и анализа данных
• Немецкий язык не ниже C1, английский не ниже B2

Условия

• Современные офисы в Мюнхене и Франкфурте
• Гибридный формат работы с гибким графиком
• Обучение в Devoteam Academy: сертифицированные тренинги и языковые курсы
• Международные возможности развития карьеры
• Корпоративные мероприятия и тимбилдинги
• Бонусы за рекомендацию сотрудников
• Современное IT-оборудование на выбор
• Corporate Benefits

Навыки

• Databricks
• Spark
• PySpark
• Python
• Scala
• SQL
• Delta Lake
• Databricks Workflows
• AWS
• Azure
• GCP
• ETL
• Data Warehousing
• Medallion Architecture