OrderYoyo
Senior Data & AI Platform Engineer Remote
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Инженер данных и AI-платформы в международной продуктовой команде OrderYOYO. Отвечает за построение и развитие lakehouse на Microsoft Fabric, продакшн-пайплайны и внедрение AI в поставку данных.
Задачи
- Проектировать, строить и эксплуатировать продакшн-решения для данных в Microsoft Fabric (Lakehouse, Warehouse, notebooks, pipelines)
- Разрабатывать и поддерживать продакшн-пайплайны на Fabric, Python и PySpark с тестами и поддерживаемостью
- Проектировать паттерны ингестии и трансформации, масштабируемые на множество источников и доменов
- Управлять ёмкостью и стоимостью Fabric, выводить из эксплуатации устаревшие слои
- Вести миграции с legacy-платформ на современные с паритетом метрик и контролем изменений
- Эксплуатировать платформу в продакшене: мониторинг, алертинг, разбор инцидентов, проверки качества данных, lineage и runbooks
- Диагностировать и устранять проблемы в SQL, Spark, пайплайнах и семантических моделях
- Поддерживать и развивать управляемые семантические модели и переиспользуемые определения метрик
- Встраивать AI в платформу и поставку: RAG, Azure OpenAI и агенты с управлением промптами и версиями
- Реализовывать прикладные data science-модели (churn, рекомендации, персонализация, фрод, риск) и демонстрировать результаты
- Работать с руководством, Finance, Product и инженерами, выбирая когда ускорять, стандартизировать или автоматизировать
Требования
- 6+ лет релевантного опыта работы с данными, включая недавнюю практическую ответственность за data engineering или data-platform engineering в продакшене
- Способность самостоятельно вести задачу от требований и техдизайна до внедрения, мониторинга и эксплуатации
- Глубокий практический опыт с Microsoft Fabric либо сильный опыт с Synapse, Databricks или Delta с готовностью перейти на Fabric
- Понимание архитектуры lakehouse и Delta-based data engineering: партиционирование, эволюция схемы, оптимизация файлов, производительность
- Экспертный SQL и T-SQL, включая сложное моделирование и тюнинг
- Продакшн-уровень Python или PySpark
- Опыт проектирования инкрементальной ингестии (CDC, change tracking, watermarks) с надёжным merge/upsert, replay и идемпотентностью
- Опыт аналитического и семантического моделирования данных, желательно с Power BI/Fabric semantic models
- Знание основ Azure: Azure SQL, ADLS/OneLake, Entra ID, managed identities, RBAC, Key Vault
- Подтверждённый опыт миграции с legacy на современную платформу
- Реальный практический опыт AI-инженерии за пределами готового Copilot
- Конкретные реализованные data science или ML-модели с результатами
Условия
- Зарплата до £80,000 в год (или локальный эквивалент)
- Удалённая работа с ежеквартальными очными встречами в одном из глобальных офисов
- Ответственность за бизнес-критичную платформу данных и AI
- Международная команда инженеров с культурой сотрудничества
Навыки
- Microsoft Fabric
- Azure
- Azure Databricks
- Synapse
- Delta Lake
- Lakehouse
- SQL
- T-SQL
- Python
- PySpark
- CDC
- Power BI
- DAX
- Azure SQL
- ADLS
- OneLake
- Entra ID
- RBAC
- Key Vault
- RAG
- Azure OpenAI
- Terraform
- Bicep
- Data Science
- ML