University Health Network
Technical Specialist
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Специалист по данным в департамент Data Engineering больницы UHN. Проектирует и поддерживает масштабные корпоративные data-решения на Microsoft Fabric для клинических, исследовательских и операционных задач.
Задачи
- Проектировать, разрабатывать, внедрять и поддерживать масштабируемые и управляемые корпоративные data-решения
- Реализовывать metadata-driven data pipelines, medallion-архитектуру, общие модели данных и размерное моделирование
- Строить end-to-end ETL/ELT-процессы от извлечения источника до слоёв трансформации и отчётности
- Определять и обеспечивать правила качества данных (полнота, точность, согласованность, валидность, уникальность, своевременность)
- Загружать данные из REST API и SaaS-платформ
- Работать со стейкхолдерами и SME для понимания требований к отчётности и анализа потребностей потребителей данных
- Развивать Enterprise Intelligence Platform на Microsoft Fabric
Требования
- Степень бакалавра в Computer Science, Software Engineering, Data Engineering, Information Systems или смежной области либо эквивалентный опыт
- Минимум 5 лет опыта в data engineering, разработке ПО, корпоративной интеграции данных или разработке хранилищ данных
- Уверенное владение Python: модульный, переиспользуемый и покрытый тестами код, pandas, обработка ошибок, логирование, unit-тесты
- Практический опыт с PySpark и Spark SQL для крупномасштабной трансформации данных и оптимизации производительности
- Продвинутый SQL (T-SQL и/или Spark SQL)
- Практический опыт с Microsoft Fabric: Lakehouse, Warehouse, Data Pipelines, Dataflows Gen2, Notebooks, OneLake
- Понимание размерного моделирования: звездные схемы, таблицы фактов и измерений, определение grain, суррогатные ключи
- Опыт загрузки данных из REST API и SaaS-платформ
- Опыт поддержки сложных корпоративных наборов данных из множества источников
- Умение самостоятельно диагностировать технические проблемы и поставлять надёжные поддерживаемые решения
Условия
- Конкурентный пакет предложения
- Государственная организация, участник Healthcare of Ontario Pension Plan (HOOPP)
- Близкий доступ к транспорту и шаттл UHN
- Гибкая рабочая среда
- Возможности развития и повышения в крупной организации
- Дополнительные льготы: скидки на путешествия, рестораны, парковку, тарифы связи, автострахование, спортзалы на территории
- Постоянная полная занятость, 37.5 часов в неделю
Навыки
- Python
- pandas
- PySpark
- Spark SQL
- SQL
- T-SQL
- Microsoft Fabric
- Lakehouse
- Data Pipelines
- Dataflows Gen2
- OneLake
- ETL/ELT
- REST API
- Microsoft Azure
- Azure SQL
- Azure Data Factory
- Azure Functions
- Azure DevOps
- Delta Lake
- Power BI
- Informatica IDMC
- Epic
- HL7
- FHIR