Manager Data Products Engineering(m/w/d)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Руководитель направления data-продуктов на платформе данных Döhler. Отвечает за реализацию, качество и эксплуатацию data-продуктов на базе Databricks и Azure, развитие инженерных стандартов и совместную работу с архитектурой, platform engineering и data governance.

Задачи

• Отвечать за реализацию, качество и эксплуатацию data-продуктов на платформе данных Döhler
• Разрабатывать data-продукты на основе Shared Data Foundation
• Обеспечивать высокие инженерные стандарты через тесты, code review, CI/CD, мониторинг и анализ инцидентов
• Развивать стандарты, шаблоны и компоненты для интеграции, трансформации, оркестрации и документации
• Реализовывать масштабируемые, производительные и поддерживаемые решения в Databricks
• Тесно взаимодействовать с архитектурой, platform engineering и data governance
• Технически поддерживать domain leads в сборе требований, оценке трудозатрат, дизайне решений и выводе в прод
• Отвечать за техническую документацию, runbooks, передачу в эксплуатацию и стабильность продуктивных data-продуктов

Требования

• Высшее образование в области информатики, бизнес-информатики, data science, software engineering или эквивалентная квалификация
• Многолетний опыт в data engineering, software engineering или работе с современными платформами данных
• Очень хорошее знание Databricks и облачных платформ данных, желательно в окружении Microsoft Azure
• Опыт построения надёжных data pipeline, ETL/ELT-процессов и batch-обработки; опыт со streaming — плюс
• Очень хорошее знание Python и SQL; PySpark и/или Spark SQL — плюс
• Опыт моделирования данных и проектирования переиспользуемых, ориентированных на потребителя моделей данных
• Знание dbt или аналогичных фреймворков для трансформации, тестирования и документации — желательно
• Опыт с Git, pull requests, code review и CI/CD-пайплайнами
• Хорошее понимание качества данных, observability, мониторинга, логирования, обработки ошибок и оптимизации производительности
• Знание SAP, в частности S/4HANA, и интеграции SAP- и non-SAP-источников данных
• Понимание тем data governance: управление доступом, метаданные, lineage, data catalog, классификация чувствительности; опыт с Unity Catalog — плюс
• Опыт управления внешними разработчиками или подрядчиками — желательно
• Структурированный, прагматичный и hands-on подход к работе, хорошие коммуникативные навыки

Условия

• Работа с увлечёнными людьми и значимыми задачами
• Возможность брать ответственность и предлагать идеи
• Индивидуальные и межотдельные возможности развития в глобальной команде
• Международное окружение с разными культурами, языками и перспективами
• Культура доверия и командного духа

Навыки

• Databricks
• Microsoft Azure
• Python
• SQL
• PySpark
• Spark SQL
• dbt
• ETL/ELT
• Batch processing
• Streaming
• Git
• CI/CD
• Data modeling
• Data quality
• Observability
• Monitoring
• Logging
• SAP
• S/4HANA
• Data Governance
• Unity Catalog
• Data Catalog
• Lineage