Data Engineer 4

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Data Engineer в Capital One для проектирования и построения облачных data-платформ и пайплайнов. Работа с распределёнными данными, lakehouse-архитектурой и современными инструментами обработки данных.

Задачи

• Проектировать, разрабатывать, тестировать и поддерживать технические решения совместно с Agile-командами
• Проектировать и строить data-пайплайны и платформы с фокусом на масштабируемость, отказоустойчивость и операционную эффективность
• Проектировать и внедрять общие паттерны data-инжиниринга для обеспечения качества, поддерживаемости и переиспользуемости кода
• Внедрять стандарты безопасности данных, включая шифрование при хранении и передаче и гранулярный контроль доступа
• Самостоятельно проектировать и поставлять облачные data-решения и приложения
• Взаимодействовать с product-менеджерами и software-инженерами для поставки облачных data-решений
• Наставлять других участников data-сообщества и делиться экспертизой
• Выступать амбассадором команды data-инжиниринга, донося технические концепции до стейкхолдеров

Требования

• Bachelor's Degree или выше в Computer Science или смежной количественной области (Statistics, Economics, Operations Research, Analytics, Mathematics, Engineering)
• Не менее 4 лет опыта в разработке приложений (стажировки не учитываются)
• Не менее 2 лет опыта работы с распределёнными данными
• Не менее 2 лет опыта работы с SQL
• Не менее 2 лет опыта работы с одним из языков программирования (Python, Java или Scala)
• Не менее 2 лет опыта проектирования и разработки data-пайплайнов
• Не менее 1 года опыта в data-моделировании и проектировании end-to-end data-решений с использованием реляционных и нереляционных СУБД

Условия

• Полная занятость, годовая зарплата $179,400 - $204,700 (Chicago, IL)
• Возможна performance-based incentive compensation, включая cash bonus и/или долгосрочные стимулы (LTI)
• Комплексный пакет льгот: health, financial и другие
• Capital One не спонсирует рабочую визу для данной позиции
• Заявки принимаются минимум 5 рабочих дней

Навыки

• Python
• Spark
• SQL
• Scala
• Java
• Databricks
• Snowflake
• NoSQL
• AWS
• Microsoft Azure
• Google Cloud
• EMR
• Glue
• Airflow
• Dagster
• MongoDB
• Cassandra
• DynamoDB
• Redshift
• Monte Carlo
• Splunk
• data modeling
• streaming data pipelines
• data warehousing
• Agile