Software Engineer II - Python, Databricks, ETL

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Инженер в agile-команду Commercial & Investment Bank для проектирования и разработки масштабируемых data pipelines и ETL-процессов, обеспечения интеграции и аналитики данных.

Задачи

• Проектировать, разрабатывать и поддерживать масштабируемые data pipelines и ETL-процессы для интеграции данных и аналитики
• Использовать SQL и понимать NoSQL-базы данных
• Применять корпоративные AI-инструменты для генерации и рефакторинга кода, написания тестов и документации с валидацией результатов
• Участвовать в модернизации данных с использованием облачных решений и оптимизации обработки данных
• Выполнять извлечение данных и реализовывать сложную логику трансформации под бизнес-требования
• Обеспечивать доступность и точность данных, внедрять лучшие практики data engineering, контролировать качество данных
• Выявлять возможности автоматизации процессов в data engineering
• Реализовывать оркестрацию данных и автоматизацию workflow с помощью AWS Step и EventBridge
• Использовать Terraform для провижининга и управления инфраструктурой

Требования

• Формальное обучение или сертификация по Data Engineering и 2+ года практического опыта
• Опыт работы с современным Lakehouse: Databricks
• Опыт с Python, PySpark, AWS, Databricks, Gen/Agentic AI, MCP, Elasticsearch, REST API
• Уверенное владение SQL (joins, агрегации) и навыки работы с RDBMS
• Понимание SQL-баз данных
• Опыт построения и оптимизации data pipelines, архитектур и наборов данных (Glue или Databricks ETL)
• Опыт разработки ETL-процессов и workflow для стриминга данных из разнородных источников
• Практический опыт использования корпоративных AI-инструментов разработки с умением критически оценивать и валидировать AI-результаты
• Понимание ответственного использования AI в инженерных процессах, включая чувствительность данных и безопасную обработку

Условия

• Конкурентный пакет вознаграждения: базовая зарплата, возможны комиссионные и дискреционные премии в виде кэша и/или акций
• Комплексное медицинское страхование, оздоровительные центры на территории
• Пенсионный сберегательный план
• Резервный уход за детьми, компенсация обучения, поддержка психического здоровья, финансовый коучинг
• Равные возможности трудоустройства и инклюзивная среда

Навыки

• Python
• Databricks
• ETL
• SQL
• NoSQL
• PySpark
• AWS
• AWS Step Functions
• EventBridge
• Terraform
• Elasticsearch
• REST API
• MCP
• Gen/Agentic AI
• Glue
• Aurora
• Airflow
• CI/CD