Senior Data Engineer

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Senior Data Engineer в P&G — технический лидер, отвечающий за архитектуру и разработку масштабируемых облачных data-платформ и сложных пайплайнов, а также за менторство команды и внедрение AI-инструментов.

Задачи

• Проектировать и реализовывать сложные крупномасштабные data-решения с учётом масштабируемости, производительности, безопасности и стоимости
• Совместно с бизнес-стейкхолдерами и product owner'ами переводить стратегические цели в архитектурные схемы и технические роадмапы
• Влиять на общую data-стратегию, архитектуру и выбор технологий в нескольких командах и доменах
• Архитектурить, строить и оптимизировать отказоустойчивые и безопасные ETL/ELT-пайплайны на современных облачных data-платформах, включая petabyte-scale и real-time обработку
• Проектировать и внедрять продвинутые паттерны интеграции данных: корпоративные системы, сторонние сервисы, стриминговые источники и API
• Внедрять продвинутые техники обработки данных (stream processing, графовые БД, принципы data mesh)
• Быть основным техническим ментором и экспертом для команды data-инженеров
• Проводить code review, design-обсуждения и технические воркшопы
• Развивать корпоративные инженерные стандарты, best practices и governance для данных (data quality, автоматизация тестирования, CI/CD, безопасность, документация, observability)
• Нести сквозную ответственность за критические data-решения: от проектирования до внедрения, мониторинга, тюнинга производительности и реагирования на инциденты
• Внедрять фреймворки качества данных, observability и обнаружение аномалий
• Оценивать, прототипировать и интегрировать передовые технологии, включая генеративный AI и агентные системы
• Выступать thought leader по ответственному и этичному применению AI в data engineering
• Владеть современными инструментами разработки: продвинутые IDE, Git-стратегии (monorepos, gitflow), IaC и CI/CD для data-платформ

Требования

• Bachelor's или Master's degree в Computer Science, Data Engineering или смежной количественной области
• 5+ лет прогрессивного опыта в data engineering с подтверждённым треком проектирования и поставки крупномасштабных сложных data-платформ и пайплайнов
• Подтверждённый опыт технического лидерства: ведение проектов, менторство инженеров, влияние на архитектурные решения в нескольких командах
• Экспертный уровень Python и SQL для сложной работы с данными, оптимизации, тюнинга производительности и продвинутой аналитики
• Экспертное знание и практический опыт хотя бы с одной крупной облачной платформой (предпочтительно Azure и/или GCP), включая их data-сервисы (Azure Synapse, Databricks, Data Factory, Event Hubs, Data Lake Storage; GCP BigQuery, Dataflow, Pub/Sub, Cloud Storage)
• Обширный практический опыт и глубокое понимание распределённой обработки данных (Spark, PySpark, Dask), включая оптимизацию производительности, управление кластерами и распределение ресурсов для petabyte-scale данных
• Экспертное знание продвинутых техник моделирования данных (dimensional, Kimball, Inmon, data vault, data mesh), принципов data warehousing и архитектур data lake
• Подтверждённая способность архитектурить и реализовывать сложные интеграции данных: продвинутые API, очереди сообщений (Kafka, Azure Event Hubs), корпоративные протоколы передачи данных
• Обширный опыт с современными инструментами разработки, CI/CD, infrastructure as code (Terraform, ARM templates) и best practices для деплоя, мониторинга и управления data и ML-пайплайнами в продакшене
• Практический опыт и лидерство в использовании генеративного AI и агентных систем для ускорения разработки и решения сложных data-задач; понимание принципов ответственного AI
• Исключительные коммуникативные навыки и способность объяснять сложные технические концепции техническим и нетехническим стейкхолдерам
• Подтверждённая способность вести инициативы от идеи до завершения с полной архитектурной и операционной ответственностью
• Глубокая любознательность и страсть к непрерывному обучению и внедрению новых data-технологий

Условия

• Полная занятость
• Компенсация: $110,000.00 - $165,300.00 в год
• Total rewards: salary + bonus (если применимо) + benefits
• Готовность рассматривать релокационные возможности по мере роста бизнеса
• Immigration Sponsorship недоступен для этой роли
• Равные возможности трудоустройства, без дискриминации
• P&G участвует в E-Verify

Навыки

• Python
• SQL
• Azure
• GCP
• Azure Synapse
• Databricks
• Azure Data Factory
• Event Hubs
• Data Lake Storage
• BigQuery
• Dataflow
• Pub/Sub
• Cloud Storage
• Spark
• PySpark
• Dask
• Kafka
• Terraform
• ARM templates
• CI/CD
• ETL
• ELT
• Data Modeling
• Kimball
• Inmon
• Data Vault
• Data Mesh
• Data Warehousing
• Data Lake
• Generative AI
• Agentic Systems
• MLOps
• NoSQL
• Cosmos DB
• MongoDB
• Neo4j
• Flink
• Spark Streaming
• Git
• Infrastructure as Code