Senior Site Reliability Engineer / Senior Developer Data Platform - Databricks, AWS (m/w/d)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Senior SRE / разработчик в agile-команду Databricks-платформы данных в AWS. Отвечает за интеграцию данных, реализацию use-case'ов, внедрение SRE-практик и автоматизацию инфраструктуры.

Задачи

• Работа в agile cross-функциональной команде над Databricks-платформой данных в AWS
• Освоение новых источников данных через data modelling и их интеграция
• Реализация новых use-case'ов и оптимизация существующих процессов
• Внедрение современных SRE-практик (SLO, SLI, incident- и postmortem-процессы)
• Автоматизация и Infrastructure-as-Code для повышения эффективности и стабильности
• Тесная работа с (Technical) Product Owner, архитекторами и бизнесом
• Проактивное развитие новых тем с фокусом на внутренних и внешних клиентов

Требования

• Минимум 3 года опыта разработки решений в data-intensive системах (data platform, DWH, data lake)
• Глубокое знание Apache Spark и методов оптимизации
• Знание OLAP/OLTP-паттернов, CDC, streaming и batch data processing
• Опыт работы с ETL-пайплайнами
• Опыт построения и поддержки CI/CD-пайплайнов (например, GitHub Actions)
• Использование Terraform или CDK для управления облачной инфраструктурой
• Понимание Data Mesh (технически и организационно, Open Data Contracts)
• Понимание архитектуры данных и концепции data products (Medallion-архитектура)
• AWS Developer и Solution Architect сертификации — плюс
• Свободное владение Python и SQL
• Интенсивное тестирование решений (pytest, Robot Framework)
• Опыт observability (monitoring, logging, tracing), например Dynatrace
• Очень хорошее знание немецкого или английского языка

Условия

• Современная рабочая среда с возможностями и перспективами
• Ответственные, интересные и сложные задачи и привлекательная оплата
• Коллегиальная атмосфера и возможности профессионального развития
• Сильный командный дух
• Открытая культура, поощряющая инициативу и вовлечённость

Навыки

• Databricks
• AWS
• Apache Spark
• OLAP
• OLTP
• CDC
• Streaming
• Batch Data Processing
• ETL
• CI/CD
• GitHub Actions
• Terraform
• CDK
• Data Mesh
• Open Data Contracts
• Medallion Architecture
• Python
• SQL
• pytest
• Robot Framework
• Dynatrace
• Observability