Principal Software Engineer - Insights & Intelligence

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Principal Software Engineer в организацию Insights & Intelligence для обеспечения надёжной и безопасной работы бизнес-критичных data pipelines и инфраструктуры в среде Databricks. Роль сфокусирована на CI/CD, мониторинге и операционной поддержке платформы данных.

Задачи

• Проектировать, внедрять и поддерживать мониторинг, алертинг и логирование production data pipelines в Databricks
• Разрабатывать и поддерживать CI/CD пайплайны для data-приложений и инфраструктуры (Git, Databricks Asset Bundles, GitHub Actions, GitLab CI/CD)
• Проактивно выявлять и устранять сбои workflow, узкие места производительности и операционные проблемы
• Проектировать и оптимизировать масштабируемые решения интеграции данных из корпоративных источников
• Поддерживать высокие стандарты качества кода, архитектуры, документации и автотестов
• Совместно работать с senior data engineers, platform engineers и архитекторами

Требования

• Bachelor’s degree в Computer Science, Software Engineering или смежной области и минимум 5 лет релевантного опыта (3 года с Master’s)
• Опыт в software development, DevOps, platform engineering или data engineering
• Продвинутое владение Python, опыт написания надёжного и тестируемого кода
• Опыт построения переиспользуемых CI/CD workflow (GitHub Actions, GitLab CI/CD или аналог)
• Понимание source control, автотестов, автоматизации деплоя и production support
• Опыт диагностики сложных production-систем: сбои workflow, проблемы качества данных, производительности и инфраструктуры

Условия

• Гибридный или удалённый формат возможен
• Медицинская страховка, страхование жизни и инвалидности, savings plan
• Оплачиваемые праздники и отпуск (PTO)
• Возможны переработки, shift differential и дискреционный бонус
• Relocation assistance не предоставляется
• Требуется U.S. citizenship и активный Secret clearance

Навыки

• Python
• Databricks
• Apache Spark
• AWS
• Amazon S3
• AWS Batch
• Amazon MSK
• Apache Kafka
• Terraform
• REST APIs
• Git
• GitHub Actions
• GitLab CI/CD
• Databricks Asset Bundles
• Unity Catalog
• Delta Lake
• Databricks Workflows
• SQL
• CI/CD