Sonae MC
EXPERT DATA ENGINEER
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Эксперт Data Engineer в команду Data, AI & Analytics COE. Отвечает за архитектуру data products и пайплайнов, стандарты и практики Data Engineering, технический роадмап и миграции.
Задачи
- Определять и управлять архитектурой data products и пайплайнов Data Engineering, обеспечивая согласованность между доменами и с платформой данных
- Устанавливать, развивать и внедрять стандарты, принципы и лучшие практики Data Engineering: ингестия, трансформация, моделирование, дизайн data products, потребление для аналитики, отчётности и AI
- Разрабатывать и обеспечивать внедрение эталонных инженерных практик: идемпотентность, переобработка, управление зависимостями, версионирование, наблюдаемость и SLA данных
- Определять, сопровождать и поддерживать миграции, эволюции и технологические апгрейды data products совместно с Data Platform
- Определять и реализовывать технический роадмап направления Data Engineering
- Выступать техническим референсом для сложных решений и выбора подхода к задачам, связанным с данными
- Поддерживать целостное видение технологического стека, паттернов разработки и инструментов Data Engineering
- Сотрудничать с другими инженерными командами для покрытия сложных технических и функциональных требований
Требования
- Образование в инженерии, компьютерных науках или смежных областях
- Подтверждённый опыт в Data Engineering
- Опыт определения и развития современных архитектур данных, включая Lakehouse и гибридные аналитические платформы с Data Lake и Data Warehouse
- Опыт с SQL, Python и PySpark (или эквивалентными технологиями)
- Прочные знания и опыт распределённой обработки (Spark, Databricks, Hadoop, Hive)
- Опыт работы в облачных средах (Azure, GCP или AWS)
- Опыт обработки больших объёмов данных в batch и/или streaming
- Знание инженерных практик: версионирование (Git), автоматизация, CI/CD пайплайны
- Сильные аналитические способности, внимание к деталям, структурирование сложной информации
- Ответственность, критическое мышление, системное видение
- Автономность, проактивность, ориентация на долгосрочные устойчивые технические решения
- Умение эффективно работать с мультидисциплинарными командами (Product, Engineering, Data Platform, Business)
- Постоянная любознательность и желание технологически развиваться
Условия
- Продовольственный субсидий на карту Dá
- Телеком-план с голосом, данными и оборудованием (для штатных сотрудников)
- Программа Flex it Up: дополнительные выходные, неоплачиваемые отпуска, гибкая модель работы (где применимо)
- Медицинское и страхование жизни (для штатных сотрудников) с возможностью расширения на семью
- Программа гибких льгот (где применимо)
- Онбординг и начальное обучение, платформа непрерывного обучения, программа финансовой грамотности
- Школьные премии и стипендии для детей сотрудников, программы каникул
- Набор для новорождённых
- Программы внутренней мобильности
- Вакцинация от гриппа
- Программа Somos Sonae: психосоциальная, финансовая и юридическая поддержка
- Сессии эргокоучинга
- Программы поддержки психического здоровья и консультации нутрициолога
- Скидки и партнёрства с более чем 300 брендами
- Бесплатные кофе и фрукты на рабочем месте
- Конкурентная зарплата
- Коллаборативная и динамичная рабочая среда
Навыки
- SQL
- Python
- PySpark
- Spark
- Databricks
- Hadoop
- Hive
- Azure
- GCP
- AWS
- Git
- CI/CD
- Lakehouse
- Data Lake
- Data Warehouse
- streaming
- batch