Data Engineer 4 (Manager, IC)

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Data Engineer в команду Risk Tech компании Capital One. Проектирование и разработка облачных data-пайплайнов и платформ с использованием AI-технологий для управления рисками.

Задачи

• Проектировать, разрабатывать, тестировать и поддерживать технические решения в full-stack инструментах и технологиях совместно с Agile-командами
• Влиять на команду разработчиков, дата-аналитиков и дата-сайентистов с глубокой экспертизой в ML, распределённых микросервисах, lakehouse-архитектуре и full-stack системах
• Использовать языки программирования Python и Spark, open-source реляционные и NoSQL базы данных, облачные data warehouse платформы Databricks и Snowflake
• Делиться страстью к новым технологиям в области данных, экспериментировать и изучать новые технологии, участвовать во внутренних и внешних технологических сообществах, менторить других членов data-сообщества
• Сотрудничать с product-менеджерами и software-инженерами для поставки надёжных cloud-first data-решений
• Самостоятельно проектировать, строить и поставлять cloud data-решения и приложения с минимальной поддержкой руководителей
• Архитектировать и внедрять общие паттерны data engineering для обеспечения качества кода, поддерживаемости и переиспользуемости
• Выступать амбассадором команды data engineering, доносить технические концепции и результаты до внутренних и внешних стейкхолдеров
• Проектировать и строить data-пайплайны и платформы с фокусом на масштабируемость, отказоустойчивость и операционную эффективность
• Внедрять стандарты безопасности данных, включая шифрование at rest/transit и гранулярный контроль доступа, обеспечивая соответствие требованиям приватности данных

Требования

• Bachelor's Degree или выше в Computer Science или смежной количественной области (Statistics, Economics, Operations Research, Analytics, Mathematics, Engineering)
• Минимум 4 года опыта в разработке приложений (стажировка не учитывается)
• Минимум 2 года опыта в распределённых данных
• Минимум 2 года опыта с SQL
• Минимум 2 года опыта с одним языком программирования (Python, Java или Scala)
• Минимум 2 года опыта в проектировании и разработке data-пайплайнов
• Минимум 1 год опыта в data-моделировании и проектировании end-to-end data-решений с использованием реляционных и нереляционных СУБД

Условия

• Полная занятость, годовая зарплата: McLean, VA — $197,300–$225,100; Richmond, VA — $179,400–$204,700
• Возможна performance-based incentive compensation, включая cash bonus и/или long term incentives (LTI)
• Комплексный пакет льгот: health, financial и другие benefits
• Спонсорство рабочей визы не предоставляется (H1B, F-1 OPT, F-1 STEM OPT, F-1 CPT, J-1, TN, E-3, O-1 и др.)

Навыки

• Python
• Spark
• SQL
• Java
• Scala
• Databricks
• Snowflake
• NoSQL
• AWS
• Microsoft Azure
• Google Cloud
• EMR
• Glue
• Airflow
• Dagster
• MongoDB
• Cassandra
• DynamoDB
• Redshift
• Monte Carlo
• Splunk
• data modeling
• data pipelines
• streaming data
• data warehousing
• Agile