ABOUT YOU SE & Co. KG
Senior Data Engineer - Sponsored Content & Products (all genders)
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Senior Data Engineer в команду Sponsored Content & Products. Задача — строить масштабируемые self-serve CPC-маркетплейсы и развивать data-платформу в условиях перехода от монолита к четырём продуктовым командам.
Задачи
- Проектировать, строить и поддерживать высоконагруженные Reverse ETL пайплайны репликации между core-платформой и клиентскими отчётными инструментами
- Оценивать корректность структурирования данных под downstream-сценарии и принимать решения о размещении нагрузок в реляционных движках (MySQL), поисковых индексах (OpenSearch), облачных хранилищах (BigQuery) или колоночном хранилище (ClickHouse)
- Возглавить миграцию текущих кастомных пайплайнов обработки данных на современную масштабируемую архитектуру с безопасным путём перехода
- Совместно с backend- и analytics-инженерами проектировать производительные и масштабируемые структуры данных, отвечая за границы физического и логического моделирования
- Развивать операционное совершенство data-инфраструктуры: проактивный мониторинг, надёжность систем и общее здоровье приложений
- Поддерживать высокий стандарт здоровья data-инфраструктуры, ценя долгосрочную поддерживаемость наравне с выпуском новых фич
- Задавать инженерные стандарты и оценивать технические компромиссы
Требования
- 5+ лет профессионального опыта в data platform engineering
- 7+ лет общего профессионального опыта в инженерии
- Уверенное владение Python для написания кастомной логики загрузки данных, драйверов валидации и sync-утилит, исполняемых в кластере
- Экспертный опыт построения автоматизированных event-driven batch-архитектур: настройка state tracking, asset sensors и графов зависимостей задач для сложных расписаний пайплайнов
- Продвинутое понимание реляционных и аналитических СУБД: знание, когда использовать транзакционные реляционные схемы (уровни изоляции транзакций MySQL, тюнинг производительности запросов), а когда — оптимизированные колоночные/документные архитектуры (ClickHouse, OpenSearch, BigQuery)
- Опыт отслеживания системных ресурсов, логирования времени выполнения пайплайнов и настройки централизованных алертов в мониторинговых платформах вроде Datadog
- Прагматичный и ориентированный на решение подход: ценность безопасных и стабильных шагов перехода выше преждевременной оптимизации и over-engineering
- Умение понятно и просто доносить сложные архитектурные концепции, технические дизайны и компромиссы по производительности
- Высокая автономность и проактивное владение инициативами
- Способность продуктивно работать с центральными инфраструктурными командами для согласования передачи данных, границ платформы и информационной архитектуры
Условия
- Работа в одной из самых быстрорастущих e-commerce компаний Европы, офисы в Гамбурге и Берлине
- Плоские иерархии, прямая коммуникация и прагматичные решения без длинных цепочек согласований
- Высокая автономия и greenfield-подобная среда в рамках перехода от монолита к четырём специализированным продуктовым командам
- Возможность напрямую влиять на будущую архитектуру и кратно увеличивать выручку Retail Media
- Команда: совместные обеды, afterwork, корпоративные мероприятия
- Пакет бенефитов (см. страницу benefits)
- Онлайн-отклик через карьерную страницу
Навыки
- Python
- Reverse ETL
- MySQL
- OpenSearch
- BigQuery
- ClickHouse
- Datadog
- Dagster
- dbt
- PHP
- Laravel
- Data Modeling
- Batch Orchestration
- Observability