(USA) Principal, Software Engineer

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Principal Data Engineer в команду, отвечающую за data-пайплайны для поиска и персонализации в e-commerce Walmart. Отвечает за полный жизненный цикл data engineering: от ingestion и трансформации до поставки фич и датасетов для ML-моделей.

Задачи

• Проектировать и развивать масштабируемые cloud-native data-пайплайны и переиспользуемую data-инфраструктуру
• Отвечать за полный цикл data engineering: ingestion, трансформация, оркестрация, тестирование, деплой и мониторинг распределённых data-систем
• Строить высоконагруженные низколатентные пайплайны (batch и streaming) для подготовки ML-ready фич и датасетов для поиска и персонализации
• Обеспечивать техническое лидерство и менторство data-инженеров, продвигать лучшие практики data-моделирования и архитектуры пайплайнов
• Работать с ML, поиском и продуктом для перевода бизнес-требований в масштабируемые data-решения и измеримые метрики
• Обеспечивать качество данных, lineage и надёжность через observability, валидацию и владение SLA пайплайнов
• Внедрять новые data-технологии и делиться знаниями внутри команды

Требования

• Большой опыт руководства крупномасштабными data engineering инициативами: распределённая обработка данных, data-моделирование, cloud-native data-платформы
• Экспертиза в big data технологиях (Spark, Kafka, Hadoop) и инструментах оркестрации пайплайнов (Airflow)
• Сильные навыки программирования на Python, Java или Scala, опыт построения production ETL/ELT и streaming пайплайнов
• Глубокое понимание data warehousing, feature engineering и data-инфраструктуры для ML/AI систем
• Опыт работы с облачными платформами (Azure, GCP или AWS) и CI/CD для data-систем
• Подтверждённая способность менторить инженеров и влиять на архитектурные решения
• Отличные навыки коммуникации и коллаборации с кросс-функциональными командами и ML-стейкхолдерами
• Приверженность качеству данных и инженерному совершенству
• Минимальные квалификации: бакалавр в CS/CE/CIS/SE или смежной области и 5 лет опыта в software engineering, либо 7 лет опыта в software engineering

Условия

• Гибридный формат работы с присутствием в офисе
• Годовая зарплата $143,000–$286,000
• Ежегодные или квартальные performance-бонусы
• Возможны дополнительные компенсации, включая акции
• Медицинская, стоматологическая и офтальмологическая страховка
• 401(k), покупка акций, оплачиваемая компанией страховка жизни
• Оплачиваемые отпуска (PTO), включая sick leave, parental leave, family care leave
• Short-term и long-term disability, скидки компании, Military Leave Pay, компенсация расходов на усыновление и суррогатное материнство
• Программа Live Better U — оплачиваемое Walmart обучение
• Immigration Sponsorship для этой позиции не предоставляется

Навыки

• Spark
• Kafka
• Hadoop
• Airflow
• Python
• Java
• Scala
• ETL
• ELT
• Streaming
• Data Warehousing
• Feature Engineering
• Azure
• GCP
• AWS
• CI/CD
• Data Modeling
• Distributed Data Processing