Munich Re
Data Engineer
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Data Engineer в Munich Reinsurance America для разработки и поддержки data pipelines и data products в Data Lab области MRS-NA Data Marketplace. Роль предполагает работу с Azure Databricks, Azure Data Factory и Power BI в домене Specialty Property & Casualty.
Задачи
- Разрабатывать и поддерживать data pipelines и процессы, обеспечивающие точность и надёжность data products
- Совместно с Domain и Product Owners создавать Aggregate и Consumer Aligned data products в Data Lab области MRS-NA Data Marketplace
- Соблюдать согласованные стандарты и процедуры, включая обмен знаниями и документацию
- Владеть соответствующими data-процессами и pipelines, обеспечивая надёжные и точные данные
- Сотрудничать с техническими и бизнес-экспертами для улучшения существующего data landscape
- Выполнять data analysis и engineering-активности совместно с data product owners, data modelers, data architects и SME
- Улучшать процессы ingestion и хранения данных, готовить отчёты по качеству данных
- Анализировать интеграцию и трансформацию данных, участвовать в создании data products
- Согласовывать data requirements, source-to-target mappings и другие data-ориентированные deliverables
- Координироваться с Data Product Owners и Principal Data Engineer по срокам и бюджету
- Работать с бизнес-руководством для выявления областей улучшения
- Участвовать в discovery-встречах, давать оценки, проводить impact analysis и документировать ключевые вопросы
- Разрабатывать, мониторить и устранять неполадки jobs/workflows, обеспечивая data quality и data governance
- Соблюдать регуляторные и privacy-требования, развивать data governance framework
- Выявлять операционные пробелы в delivery исходя из потенциального бизнес-использования
Требования
- Bachelor’s degree в Computer Science, Data Analytics, Computer/Electronics/Electrical Engineering или смежной области
- 3 года опыта Software Engineer, Data Engineer/Analyst или другой роли, связанной с data analysis
- Минимум 2 года опыта в индустрии Specialty Property & Casualty
- Опыт разработки масштабируемых и отказоустойчивых Data Pipelines/ETL, data modeling и data warehousing
- Практический опыт с Azure Databricks для data engineering, включая построение pipelines и оптимизацию workflows
- Опыт использования Python, PySpark и SQL для построения data products и решения сложных data-задач
- Опыт использования Azure Data Factory для построения ETL jobs
- Опыт использования DAX для моделей BI-отчётов и Power BI для построения отчётов
- Опыт работы в Data Mesh-среде с Cloud-технологиями
- Возможность приезжать в офис в Princeton, NJ 2 раза в неделю
Условия
- Годовой бонус в процентах от eligible pay
- Медицинская страховка
- Программа wellbeing для сотрудников
- Страхование жизни и инвалидности
- 401k match
- Пенсионный сберегательный план
- Оплачиваемые праздники и отпуск (PTO)
- Возможность удалённой работы с обязательным присутствием в офисе Princeton, NJ 2 раза в неделю
Навыки
- Python
- PySpark
- SQL
- Azure Databricks
- Azure Data Factory
- DAX
- Power BI
- ETL
- Data Modeling
- Data Warehousing
- Data Mesh
- Cloud