Senior Cloud Data Engineer (m/w/d)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Senior Cloud Data Engineer в Swiss Life для построения нового Lakehouse в AWS-облаке и развития процессов обработки данных. Роль предполагает проектирование масштабируемых ETL/ELT-пайплайнов и поддержку существующих Data Warehouse решений.

Задачи

• Совместно с командой строить новый Lakehouse в AWS-облаке
• Разрабатывать и оптимизировать процессы обработки данных
• Проектировать и реализовывать масштабируемые ETL/ELT-пайплайны на AWS-сервисах (S3, Athena, Lambda и др.)
• Консультировать коллег по предоставлению, поддержке и оптимизации существующих Data Warehouse Hub решений
• Обеспечивать качество данных, выявлять и внедрять оптимизации производительности
• Тесно взаимодействовать с другими agile-командами, бизнес- и IT-подразделениями

Требования

• Высшее образование в области информатики или бизнес-информатики либо сопоставимая квалификация и минимум 5 лет опыта в роли Data Engineer или аналогичной
• Глубокие знания AWS-технологий, в частности S3, Athena, Glue и связанных сервисов, таких как EMR
• Очень хорошее знание Python и опыт с фреймворками обработки данных (Polars, Pandas, PySpark), опыт с SQL-базами данных
• Желательно знание моделирования Data Vault 2.0
• Самостоятельность, выраженные аналитические способности, структурированный подход, опыт в agile-методах разработки
• Хороший немецкий (минимум C1) и хороший английский (минимум B2)

Условия

• Плоская иерархия и прямой вклад в успех компании
• Гибкий график работы и work-life balance
• Различные варианты корпоративного пенсионного обеспечения
• Индивидуальное развитие с адаптированными возможностями обучения и карьерного роста
• Корпоративная столовая
• Корпоративный спорт
• Deutschlandticket для общественного транспорта
• Возможности для присмотра за детьми
• Программы управления здоровьем

Навыки

• AWS
• S3
• Athena
• Glue
• EMR
• Lambda
• Python
• Polars
• Pandas
• PySpark
• SQL
• Data Vault 2.0
• ETL
• ELT
• Data Warehouse
• Lakehouse