Engelhart Commodities Trading Partners
Principal Data Engineer, Data Warehouse (TPL)
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Principal Data Engineer в торговую компанию Engelhart. Отвечает за слой выдачи данных между платформой CTRM и потребителями, архитектуру и стандарты data warehouse, выводя текущий PoC в продакшн.
Задачи
- Владеть слоем выдачи данных intraday и EOD между платформой CTRM и потребителями (Market Risk, Credit Risk, Treasury, Finance, Reporting, desk tools)
- Проектировать и поддерживать схемы данных и контракты выдачи, включая SQL, API и распределение через Kafka
- Определять паттерны версионирования и воспроизводимости данных: as-of timestamps, run IDs, снапшоты и инкрементальные обновления
- Владеть пайплайном CTRM-to-warehouse: надёжный ingestion, трансформация, валидация и доставка
- Руководить внедрением и продакшн-использованием слоя выдачи data warehouse, закрывая PoC и превращая его в production-ready платформу
- Задавать инженерные стандарты для моделирования данных, эволюции схем, качества данных, observability, тестирования и операционной поддержки
- Строить и эксплуатировать решения на ClickHouse, S3, Kafka и schema registry
- Работать со стейкхолдерами: выявлять потребности, предлагать решения, объяснять trade-offs и устанавливать data contracts
- Обеспечивать техническое лидерство команде data engineering
- Участвовать в формировании долгосрочной архитектуры данных
Требования
- Опыт проектирования и построения data warehouse (обязательно)
- Production-опыт работы с ClickHouse (обязательно)
- Опыт вывода колоночной OLAP-платформы в продакшн, понимание производительности аналитических запросов и моделирования данных
- Практический опыт с Kafka и event-driven / streaming архитектурами
- Сильные навыки Python и достаточная грамотность в C#
- Опыт моделирования версионированных данных position и P&L, включая point-in-time / as-of views и воспроизводимые запуски
- Опыт работы в трейдинге или другой time-sensitive, data-intensive среде
- Предыдущий опыт технического лидерства
- Сильные навыки работы со стейкхолдерами и коммуникации
- Решение-ориентированный подход и умение балансировать потребности нескольких команд
Условия
- Конкурентная компенсация и участие в discretionary bonus plan
- 25 дней ежегодного отпуска, не считая публичных праздников Великобритании
- Пакет льгот: медицинская и стоматологическая страховка, страхование жизни, пенсионные взносы, дополнительные льготы
- Возможность внешнего и внутреннего обучения согласно Training & Development Policy
- Полная занятость, офис в Лондоне
Навыки
- ClickHouse
- S3
- Kafka
- schema registry
- Python
- C#
- SQL
- dbt
- OLAP
- data warehouse
- CTRM
- Orchestrade
- Endur