Principal Data Engineer - Ranking & Visibility (all genders)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Principal Data Engineer в команде Ranking & Visibility Zalando. Отвечает за архитектуру и моделирование данных, превращая сложные высоконагруженные датасеты в чистые слои для аналитиков и Applied Scientists, а также за продакшенизацию прототипов моделей.

Задачи

• Выявлять релевантные события трекинга в сложных потоках и строить стандартизированные, документированные дата-продукты
• Совместно с Applied Scientists превращать прототипы моделей (статистические и ML) в надёжные низколатентные продакшн-пайплайны
• Вести стратегию моделирования данных для продакшн-датасетов и пайплайнов моделей
• Проектировать, строить и оптимизировать пайплайны со строгими стандартами качества, тестируемости и мониторинга
• Задавать инженерные стандарты, менторить команду и вести крупные инициативы по архитектуре данных

Требования

• Высшее образование или эквивалентный практический опыт в Computer Science, Data Engineering, Software Engineering или смежной количественной области, 6+ лет релевантного опыта
• Опыт руководства проектированием пайплайнов или дата-платформ, используемых несколькими командами, с измеримым улучшением надёжности или стоимости
• Подтверждённый опыт продакшенизации прототипов моделей от Applied Scientists
• Сильные навыки PySpark, Python и SQL, включая поддерживаемый код, принципы проектирования ПО, юнит-тестирование, отладку и код-ревью
• Опыт построения и эксплуатации пайплайнов, включая batch и real-time/streaming, с Apache Airflow, Apache Spark, Apache Flink или аналогами
• Понимание баз данных, моделирования данных, распределённой обработки и оптимизации производительности запросов и хранения
• Опыт эксплуатации продакшн-пайплайнов: мониторинг, алертинг, инцидент-менеджмент, root cause analysis, оптимизация надёжности и стоимости
• Практический опыт с CI/CD и облачной инфраструктурой, желательно AWS
• Опыт статистического моделирования данных

Условия

• 27 дней отпуска для штатных сотрудников (+1 день за каждый календарный год до 30 дней)
• Скидки 40% на fashion и beauty товары Zalando, 30% на Lounge by Zalando и скидки партнёров
• Поддержка семьи, включая консультирование и услуги для родителей и опекунов
• Корпоративная пенсионная схема
• Программа акций для сотрудников
• Опции для здоровья и благополучия, включая Wellhub
• Поддержка психического здоровья и коучинг
• Обучение через платформу и дважды в год peer-to-peer review
• 2 оплачиваемых дня волонтёрства в год
• Помощь с релокацией (по предварительному согласованию)

Навыки

• PySpark
• Python
• SQL
• Apache Airflow
• Apache Spark
• Apache Flink
• CI/CD
• AWS
• Data modeling
• Streaming
• Batch processing