exmox GmbH
Senior AI-Native Data Engineer (f/m/x)
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Senior Data Engineer в exmox — построение и масштабирование data-фундамента на Databricks с активным использованием AI-инструментов (Claude) в ежедневной работе. Роль с полным владением пайплайнами и Data Lakehouse, гибридный формат в Гамбурге.
Задачи
- Проектировать, разрабатывать и поддерживать масштабируемые ETL-пайплайны на Databricks для интеграции данных из приложений, веб-продуктов и маркетинговых партнёров
- Строить и управлять Data Lakehouse на Databricks, включая миграцию legacy data-продуктов и реализацию трансформаций на PySpark
- Мониторить и оптимизировать data-стек для ночной и near-real-time обработки in-house трекинга, обеспечивать качество и целостность данных
- Ежедневно использовать Claude и аналогичные AI-инструменты для планирования, разработки, отладки и документирования пайплайнов
- Интегрировать AI в workflow версионирования через Git worktrees для параллельной работы над несколькими ветками
- Поддерживать структурированный контекст и память для AI-инструментов (CLAUDE.md-подобные файлы инструкций)
- Запускать несколько AI-агентов параллельно на разных тикетах, ревьюить и интегрировать их результат
- Использовать AI для повседневной координации, в том числе в Slack
- Тесно сотрудничать с engineering и ML-командами для бесшовного потока данных в Data Lakehouse
- Следить за лучшими практиками и новыми технологиями в data engineering и прикладном AI
Требования
- Степень в Computer Science, Engineering или Information Systems либо опыт буткемпа
- Минимум 4 года профессионального опыта в data engineering
- Глубокий актуальный опыт проектирования, реализации и оптимизации ETL на Databricks (минимум год hands-on)
- Опыт работы с AWS: S3, Kinesis, Lambda или аналоги
- Ежедневное практическое использование AI-инструментов (Claude) в планировании, разработке, отладке и документации
- Умение настраивать и поддерживать контекст и память для AI-инструментов, структурированные инструкции и переиспользуемые промпты
- Опыт параллельной работы с несколькими тикетами с помощью AI и Git worktrees
- Высокий уровень Python, SQL и PySpark, чистый поддерживаемый production-код
- Свободный английский устно и письменно
- Сильные навыки решения проблем, внимание к деталям, умение работать самостоятельно и в команде
Условия
- Гибридный формат в Гамбурге: удалённо по понедельникам и пятницам, офис во вторник, среду и четверг
- Субсидия на транспорт
- Бюджет на обучение
- Wellness и спортзал
- Workation
- Командные обеды раз в две недели
Навыки
- Databricks
- PySpark
- Python
- SQL
- AWS
- S3
- Kinesis
- Lambda
- GitLab CI/CD
- PostgreSQL
- Claude
- Git worktrees
- ETL
- Data Lakehouse