Software Engineer- Data Platform

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Инженер в команду Data Platform компании Uplight. Задача — развивать и поддерживать платформенный слой на базе Databricks поверх AWS и GCP, чтобы другие команды могли эффективно работать с данными.

Задачи

• Создавать и поддерживать инфраструктуру Databricks в AWS и GCP с помощью Terraform
• Администрировать Unity Catalog: metastore, workspace, каталоги и схемы, гранты и паттерны доступа
• Разрабатывать ускорители деплоя, шаблоны и self-service инструменты (включая Databricks Asset Bundles)
• Поддерживать инженеров компании при работе с платформой, разбирать инциденты и превращать повторяющиеся вопросы в документацию и инструменты
• Разрабатывать и поддерживать CI/CD пайплайны в CircleCI, включая OIDC-аутентификацию и деплой через service principal
• Поддерживать и развивать существующую MLOps-инфраструктуру
• Внедрять агентный AI в повседневные процессы команды: разработку, код-ревью, тестирование и операционные runbook'и

Требования

• 2–5 лет опыта в разработке ПО с использованием хотя бы одного крупного облачного провайдера, желательно в инфраструктурных или data platform ролях
• Опыт работы с Terraform или аналогичными IaC-инструментами
• Опыт работы с Databricks или аналогичной data-платформой
• Уверенное владение Python; рабочее знание SQL
• Понимание концепций data engineering: ETL-пайплайны, моделирование данных, оркестрация workflow
• Знакомство или готовность работать с AI-агентами и ассистентами для кода
• Готовность задавать вопросы, работать с нечёткими требованиями и учиться у коллег

Условия

• Remote-first команда
• Бонус к зарплате
• Гибкий график и гибкий отпуск
• Щедрый родительский отпуск
• Wellness-стипендия
• Программы обучения и развития
• Инклюзивная культура, Employee Resource Groups
• Компания — сертифицированный B Corporation

Навыки

• Databricks
• AWS
• GCP
• Terraform
• Unity Catalog
• Databricks Asset Bundles
• CI/CD
• CircleCI
• OIDC
• Python
• SQL
• ETL
• Data Modeling
• Workflow Orchestration
• MLOps
• Spark
• Delta Lake
• AI coding agents