Natixis in Portugal
GCP/Python Data Engineer (French Speaker) | BPCE-SI
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Data Engineer в команду BPCE SI в Natixis in Portugal. Проектирование и поддержка масштабируемых data-пайплайнов и платформ на GCP и Python для принятия решений на основе данных.
Задачи
- Проектировать, разрабатывать и поддерживать end-to-end data-пайплайны (ELT/ETL) для загрузки, обработки и хранения больших объёмов данных из разных источников
- Строить надёжные модели данных и схемы (data warehouse/data lake)
- Разрабатывать на Python: трансформации данных, оркестрация, автоматизация, проверки качества данных
- Встраивать тестирование в жизненный цикл data engineering (UAT/QA), валидировать корректность данных и обеспечивать готовность пайплайнов к релизу
- Взаимодействовать с Data Engineers, Data Scientists, аналитиками и бизнес-заказчиками для понимания потребностей в данных
- Внедрять мониторинг, логирование и алертинг для надёжности данных
- Обеспечивать соответствие требованиям data governance, безопасности, приватности и комплаенса (IAM, шифрование, контроль доступа)
- Вести техническую документацию, data-словари, runbooks и тест-планы
- Участвовать в code review, тестировании и Agile/Scrum-церемониях
Требования
- Степень бакалавра в Computer Science, инженерии, математике или смежной области (или эквивалентный практический опыт)
- 3+ года профессионального опыта в data engineering
- Сильные навыки разработки на Python (паттерны проектирования, тестирование, упаковка, производительность)
- Опыт с Google Cloud Platform (BigQuery, Cloud Storage, Dataflow/Beam, Dataproc, Pub/Sub, Cloud Composer/Airflow)
- Опыт работы с SQL
- Практический опыт построения и поддержки data-пайплайнов, data lake или data warehouse
- Владение концепциями ETL/ELT, моделированием данных и проектированием схем (star/snowflake, нормализация)
- Знакомство с инструментами оркестрации (Airflow/Cloud Composer) и CI/CD для data-пайплайнов
- Опыт работы с системой контроля версий (Git) и инструментами коллаборации
- Опыт практик тестирования: UAT, QA, планирование тестов, валидация данных и автоматизация тестов (желательно)
- Хорошие коммуникативные навыки на французском (уровень B1+) и английском
- Резюме принимаются только на английском
Условия
- Гибридный формат работы в Лиссабоне
- Гибкая политика гибридной работы
- Бюджет на экологичный транспорт, электровелосипеды
- Программы wellbeing: Honolulu Wellness Club, молитвенная комната, комната для кормления
- Инициативы ESG и DEI, инклюзивная и справедливая среда
Навыки
- Python
- Google Cloud Platform
- BigQuery
- Cloud Storage
- Dataflow
- Beam
- Dataproc
- Pub/Sub
- Cloud Composer
- Airflow
- SQL
- ETL
- ELT
- Data modeling
- Git
- CI/CD
- Control-M
- UAT
- QA