exmox GmbH
Senior Data Engineer (f/m/x)
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Senior Data Engineer в exmox — платформу rewarded user engagement для мобильных игр. Задача — строить и масштабировать data-фундамент бизнеса: ETL-пайплайны и DataLakehouse на Databricks, работая в тесной связке с продуктом и инженерией.
Задачи
- Проектировать, разрабатывать и поддерживать масштабируемые ETL-пайплайны на Databricks для интеграции данных из приложений, веб-продуктов и маркетинговых партнёров
- Строить и вести DataLakehouse на Databricks, включая миграцию legacy data-продуктов
- Реализовывать трансформации и логику обработки данных на Databricks и PySpark
- Мониторить и поддерживать data-стек для ночной и near-real-time обработки in-house трекинга, обеспечивать производительность и надёжность
- Оптимизировать и отлаживать пайплайны, следить за качеством и целостностью данных
- Работать с кросс-функциональными командами для бесшовного потока данных в DataLakehouse и поддерживать аналитиков в Tableau
- Следить за лучшими практиками и новыми технологиями в data engineering и приносить идеи в команду
Требования
- Степень в Computer Science, Engineering или Information Systems либо опыт буткемпа и минимум 4 года профессионального опыта в data engineering
- Опыт проектирования, реализации и оптимизации ETL-процессов и оркестрации ETL-воркфлоу в продакшене
- Практический опыт с Databricks и AWS-сервисами (S3, Kinesis, Lambda) или аналогами
- Уверенное владение Python, SQL и PySpark, чистый и поддерживаемый production-ready код
- Активное использование AI-инструментов в планировании и разработке
- Опыт с GitLab CI/CD и знакомство с PostgreSQL — плюс
- Сильные навыки решения проблем, внимание к деталям, умение работать самостоятельно и в команде
- Свободный английский устно и письменно
Условия
- Гибридный формат в Гамбурге: удалённо по понедельникам и пятницам, офис во вторник, среду и четверг
- Субсидия на транспорт
- Бюджет на обучение
- Wellness и спортзал
- Workation
- Командные обеды раз в две недели
Навыки
- Databricks
- PySpark
- Python
- SQL
- AWS
- S3
- Kinesis
- Lambda
- GitLab CI/CD
- PostgreSQL
- Tableau
- ETL