Databricks Platform Engineer

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Инженер платформы Databricks для крупной программы клиента из списка Fortune 500. Проектирование, построение и оптимизация инфраструктуры и DataOps-процессов с обеспечением масштабируемости, наблюдаемости и экономичности.

Задачи

• Проектировать, строить и оптимизировать инфраструктуру и DataOps-процессы
• Масштабировать и управлять средами данных с помощью Databricks, Terraform, Terragrunt, Python и SQL
• Развивать CI/CD-автоматизацию
• Обеспечивать наблюдаемость платформы, логирование и операционный мониторинг
• Помогать управлять облачными бюджетами и оптимизировать вычислительные затраты
• Безопасно интегрировать новые AI-возможности
• Работать в кросс-функциональной команде 70+ человек (Data Engineering, AI, Data Science, Governance, Reporting)

Требования

• 2+ года опыта с Python и SQL, работа с REST API и CLI-инструментами для управления инфраструктурой
• 2+ года опыта с архитектурой и администрированием платформы Databricks и распределёнными вычислительными средами
• 2+ года опыта реализации Infrastructure as Code (IaC) с Terraform и Terragrunt
• Опыт проектирования CI/CD-пайплайнов и DataOps-процессов с GitHub и GitHub Actions
• Опыт внедрения наблюдаемости платформы, логирования и мониторинга с Splunk или Dynatrace
• Опыт работы с корпоративным управлением, change requests и поддержкой аудируемых приложений
• Степень бакалавра
• Гражданство США (требование по характеру работ)

Условия

• Полный или частичный рабочий день (от 20 часов в неделю) с доступом к программам льгот
• Медицинская, страхование жизни, инвалидности, финансовые и пенсионные программы
• Оплачиваемый отпуск, профессиональное развитие, помощь в обучении, программы work-life и уход за зависимыми
• Программа признания заслуг сотрудников
• Возможны форматы remote, hybrid или onsite в зависимости от позиции

Навыки

• Databricks
• Python
• SQL
• REST API
• CLI
• Terraform
• Terragrunt
• GitHub
• GitHub Actions
• CI/CD
• DataOps
• Splunk
• Dynatrace
• Unity Catalog
• Delta Lake
• Scala
• Java
• MLOps
• Agile