Software Engineer- Data Platform

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Инженер в команду Data Platform компании Uplight. Задача — развивать и поддерживать инфраструктуру дата-платформы на Databricks поверх AWS и GCP, обеспечивая надёжность, безопасность и удобство использования для других команд.

Задачи

• Создавать и поддерживать инфраструктуру Databricks в AWS и GCP с помощью Terraform
• Администрировать Unity Catalog: metastore, workspace, каталоги и схемы, права доступа и паттерны разграничения доступа
• Разрабатывать ускорители деплоя, шаблоны и self-service инструменты (включая Databricks Asset Bundles) для онбординга других команд
• Поддерживать инженеров компании при работе с платформой, устранять проблемы и превращать повторяющиеся вопросы в документацию и инструменты
• Разрабатывать и поддерживать CI/CD пайплайны в CircleCI, включая OIDC-аутентификацию и паттерны деплоя через service principal
• Поддерживать и развивать существующую MLOps-инфраструктуру
• Внедрять агентный AI в повседневные процессы команды: AI-агенты и ассистенты для разработки, код-ревью, тестирования и операционных runbook

Требования

• 2–5 лет опыта в разработке ПО с использованием хотя бы одного крупного облачного провайдера, желательно в инфраструктурных или data platform ролях
• Опыт работы с Terraform или аналогичными Infrastructure-as-Code инструментами для управления облачными ресурсами
• Опыт работы с Databricks или аналогичной дата-платформой
• Уверенное владение Python; рабочие знания SQL
• Понимание концепций data engineering: ETL-пайплайны, моделирование данных, оркестрация workflow
• Знакомство или искренний интерес к работе с AI-агентами и ассистентами для кодинга
• Готовность задавать вопросы, работать с нечёткими требованиями и учиться у коллег

Условия

• Remote-first команда
• Гибкий график и гибкость в работе
• Гибкий неограниченный отпуск
• Щедрый отпуск по уходу за ребёнком
• Wellness-стипендия
• Программы обучения и развития, возможности карьерного роста
• Инклюзивная культура и Employee Resource Groups
• Бонус к зарплате

Навыки

• Databricks
• AWS
• GCP
• Terraform
• Unity Catalog
• Databricks Asset Bundles
• CircleCI
• OIDC
• Python
• SQL
• ETL
• Data Modeling
• Workflow Orchestration
• MLOps
• Spark
• Delta Lake
• AI coding agents