Senior Specialist - Data Engineering

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Lead-инженер в команду Vulcan Platform. Техническое лидерство в проектировании и развитии облачной платформы и data-инженерии на AWS и Databricks для масштабируемых и надёжных data-продуктов.

Задачи

• Руководить, наставлять и развивать инженеров команды Vulcan Platform
• Обеспечивать техническое лидерство в проектировании платформы, инженерных практиках и поставке
• Задавать и поддерживать инженерные стандарты: качество кода, тестирование, документация, CI/CD, операционная поддержка
• Проектировать, строить и поддерживать масштабируемые, отказоустойчивые и безопасные платформенные решения на AWS и Databricks
• Разрабатывать переиспользуемые платформенные сервисы, паттерны и фреймворки
• Проектировать и внедрять современные data- и платформенные архитектуры, включая lakehouse и event-driven паттерны
• Курировать проектирование и реализацию data-пайплайнов, фреймворков ингестии и трансформаций
• Развивать масштабируемую обработку данных на Databricks, Spark и сервисах AWS
• Обеспечивать качество данных, наблюдаемость, lineage и операционную поддержку
• Внедрять безопасность, комплаенс и governance в инженерные решения
• Улучшать мониторинг, алертинг, логирование и инцидент-менеджмент
• Поддерживать управление и оптимизацию затрат на облачную инфраструктуру
• Оценивать и внедрять инструменты и практики для повышения продуктивности и надёжности
• Развивать developer experience, релизные процессы и зрелость тестирования

Требования

• Степень бакалавра в Computer Science, инженерии, IT или эквивалентный практический опыт
• Значительный опыт в software engineering, platform engineering или data engineering, включая senior/lead роль
• Сильный практический опыт проектирования и поставки решений на AWS
• Сильный опыт работы с Databricks или аналогичными Data lakehouse технологиями в enterprise-среде
• Опыт построения и поддержки масштабируемых data-пайплайнов и распределённой обработки
• Опыт руководства инженерами и технической поставки в кросс-функциональных командах
• Опыт с автоматизацией платформы, CI/CD и infrastructure as code
• Опыт работы в регулируемой enterprise-среде с пониманием безопасности, рисков и комплаенса
• Сильное знание сервисов AWS: storage, compute, оркестрация, мониторинг, безопасность
• Сильный опыт с Databricks: notebooks, workflows, управление кластерами, паттерны обработки данных
• Сильные навыки программирования на Python и SQL
• Понимание Spark и концепций распределённой обработки данных
• Опыт с data-архитектурой, моделированием данных и принципами lakehouse
• Знакомство с Terraform, CloudFormation или аналогичным IaC
• Опыт с Git, CI/CD, контейнеризацией и оркестрацией workflow
• Понимание практик наблюдаемости: логирование, метрики, мониторинг, алертинг
• Сильные лидерские навыки и управление стейкхолдерами
• Отличные навыки решения проблем и аналитические способности
• Сильные коммуникативные навыки

Условия

• Гибридный формат: минимум три дня в неделю в офисе или у клиента
• Гибкость удалённой работы и совместная работа в офисе
• Один anchor day в неделю для всей команды в офисе
• Работа в глобальной компании Marsh (NYSE: MRSH)
• Инклюзивная и гибкая рабочая среда
• Развитие и обучение в культуре непрерывного совершенствования

Навыки

• AWS
• Databricks
• Spark
• Python
• SQL
• S3
• Lambda
• Glue
• Step Functions
• RDS
• IAM
• CloudWatch
• Terraform
• CloudFormation
• Git
• CI/CD
• Docker
• Data lakehouse