Azure Data Engineer

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Инженер данных в Arcadis для проектирования и разработки решений на платформе Microsoft Azure Data Platform, включая MS Fabric и Azure Data Lake. Роль предполагает построение end-to-end аналитических решений и наставничество коллег.

Задачи

• Проектировать, разрабатывать, тестировать, внедрять и поддерживать технические решения на Microsoft Azure Data Platform в Agile-командах
• Проектировать решения на платформах MS Fabric / Azure
• Работать с концепциями баз данных, моделированием данных, хранимыми процедурами, сложными запросами и оптимизацией производительности SQL
• Наставлять коллег и развивать их экспертизу в решениях на Azure data platform
• Строить end-to-end решения на платформе Azure data analytics
• Строить Azure data analytics решения с подходом DevOps (CI/CD)

Требования

• Степень бакалавра и 12+ лет релевантного профессионального опыта, включая минимум 8 лет практической работы с технологиями Azure Data Platform
• Практический опыт среднего уровня с Microsoft Fabric: Pipelines, Dataflows Gen2, ADLS Gen2, Notebooks, Lakehouse, Warehouse, Delta tables
• Экспертиза в SQL: сложные трансформации, joins между модулями, оптимизация, стратегии индексирования
• Сильный практический опыт с PySpark, операциями Delta Lake и масштабируемой распределённой обработкой
• Опыт построения масштабируемых и оптимизированных data pipelines по лучшим инженерным практикам
• Опыт performance tuning, оптимизации запросов и ускорения выполнения пайплайнов
• Понимание механизмов incremental load и full load, включая change detection, Delta merge, surrogate keys и сверку данных
• Опыт работы с Fabric notebooks, объединением больших датасетов и обработкой incremental/full загрузок
• Навыки коммуникации и понимание бизнес-логики систем
• Опыт с T-SQL, SSIS, SSAS, SSRS, Azure Data Factory, Azure Data Lake Store, Azure SQL DB, Azure Data Bricks с Python/Scala
• Azure Data Lake Analytics — желательно, но не обязательно

Условия

• Работа в международной компании Arcadis (более 34 000 сотрудников в 30+ странах)
• Участие в цифровой трансформации и устойчивых проектах
• Skills-based подход к карьере и развитию
• Политика равенства, разнообразия и инклюзивности

Навыки

• Microsoft Azure
• MS Fabric
• Azure Data Factory
• Azure Data Lake Store
• Azure Data Lake Analytics
• Azure SQL DB
• Azure Data Bricks
• Python
• Scala
• T-SQL
• SSIS
• SSAS
• SSRS
• SQL
• PySpark
• Delta Lake
• DevOps
• CI/CD
• Dataflows Gen2
• ADLS Gen2
• Lakehouse
• Warehouse
• Delta tables