Data Engineer

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Data Engineer в команду Data Exchange в офисе Zeta Global в Копенгагене. Работа над анализом, разработкой и поддержкой сложной инфраструктуры данных и пайплайнов совместно с международными командами.

Задачи

• Участвовать во всех этапах разработки: от брейншторминга до поддержки, с упором на анализ, прототипирование и разработку
• Проектировать, строить и поддерживать масштабируемые и надёжные пайплайны данных
• Анализировать большие наборы данных и выявлять проблемы
• Разрабатывать ETL-процессы, алгоритмы и модели данных
• Взаимодействовать с разработчиками и международными продуктовыми стейкхолдерами

Требования

• Сильный академический бэкграунд в количественной области (Computer Science, математика, физика или смежные дисциплины)
• Практический опыт проектирования, построения и поддержки масштабируемых и надёжных пайплайнов данных
• Владение Python, Scala или другими ООП-языками для задач data engineering и обработки данных
• Сильные навыки анализа данных, включая работу с большими наборами данных
• Знание распределённой обработки данных для batch-нагрузок
• Понимание технологий баз данных
• Отличные коммуникативные навыки на английском языке

Условия

• Гибкий график работы, включая регулируемые офисные часы и возможность occasional remote work
• Свобода выбора операционной системы (Mac, Windows) и инструментов разработки
• Возможность предлагать и внедрять новые технологии
• Международная среда и возможности карьерного роста в Берлине, Сан-Франциско или Нью-Йорке

Навыки

• Python
• Scala
• OOP
• CI/CD
• Apache Spark
• Airflow
• AWS
• S3
• Glue
• Athena
• EMR
• Data Modeling
• Data Warehousing
• Query Optimization
• ETL