Staff Data Engineer - Sponsored Content & Products (all genders)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Data Platform Engineer в команду Sponsored Content & Products для построения self-serve CPC-маркетплейсов. Задача — связать core-платформу с клиентскими reporting-инструментами через высоконагруженные reverse-ETL пайплайны и модернизировать текущую архитектуру данных.

Задачи

• Проектировать, строить и поддерживать высоконагруженные reverse-ETL репликационные пайплайны между core-платформой и клиентскими reporting-инструментами
• Руководить миграцией текущих кастомных пайплайнов обработки данных на современную масштабируемую архитектуру через безопасный путь миграции
• Оценивать корректность структурирования данных под downstream-сценарии и принимать решения о размещении нагрузок в MySQL, OpenSearch, BigQuery или ClickHouse
• Совместно с backend- и analytics-инженерами проектировать высокопроизводительные масштабируемые структуры данных, отвечая за физические и логические границы моделирования
• Укреплять операционную зрелость инфраструктуры данных: проактивный мониторинг, надёжность систем и стабильность приложений наравне с разработкой новых пайплайнов
• Поддерживать высокий стандарт стабильности данных и долгосрочной поддерживаемости наравне с выпуском новых фич
• Задавать инженерные стандарты и обосновывать технические компромиссы

Требования

• Более 5 лет опыта в Data Platform Engineering
• Более 7 лет общего опыта в Software Engineering
• Уверенное владение Python для написания кастомной логики загрузки данных, драйверов валидации и кластерных программ синхронизации
• Опыт построения автоматизированных event-driven batch-архитектур, настройки статус-трекинга, asset-сенсоров и графов зависимостей задач для сложных расписаний пайплайнов
• Продвинутое понимание реляционных и аналитических движков БД, знание когда применять транзакционные реляционные схемы (уровни изоляции MySQL, тюнинг запросов) против колоночных/документных архитектур (ClickHouse, OpenSearch, BigQuery)
• Опыт observability и телеметрии: отслеживание системных ресурсов, логирование времени выполнения пайплайнов, настройка централизованных алертов в Datadog
• Прагматичный подход к решению задач: безопасные стабильные шаги миграции вместо преждевременной оптимизации и over-engineering
• Умение понятно доносить сложные архитектурные концепции, технические дизайны и компромиссы по производительности
• Высокая автономность и проактивная ответственность, готовность самостоятельно вести инициативы по данным
• Умение продуктивно работать с центральными инфраструктурными командами для согласования передачи данных, границ платформы и информационной архитектуры

Условия

• Флэт-иерархия, прямая коммуникация и прагматичные решения
• Короткие пути согласования
• Team-lunch, after-work drinks, корпоративные мероприятия
• Гибридный формат с офисами в Гамбурге и Берлине
• Возможность влиять на будущий tech-stack в greenfield-подобной среде

Навыки

• Python
• MySQL
• OpenSearch
• BigQuery
• ClickHouse
• Datadog
• Dagster
• dbt
• PHP
• Laravel
• Batch-оркестрация
• Reverse ETL
• Data Platform Engineering
• Observability