Senior Data Engineer (Contract) - Data Quality & Systems Forensics

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Senior Data Engineer на 6-месячный контракт в Global Data & AI команду Dermalogica. Задача — расследовать и устранять проблемы качества данных и интеграций в гибридной среде (ERP, e-commerce, SQL Server, ETL, облачное хранилище), а не строить новые пайплайны с нуля.

Задачи

• Расследовать и находить первопричины расхождений данных в исходных системах, базах данных, интеграциях, хранилищах и слоях отчётности
• Прослеживать данные end-to-end, чтобы понять, где трансформации, маппинги, фильтры, джобы или бизнес-правила дают неверный результат
• Вести приоритизированный бэклог проблем качества данных от расследования до исправления, валидации, бэкфилла и закрытия
• Аудировать существующие SQL-джобы, хранимые процедуры, ETL-процессы, зависимости и логику трансформаций на предмет хрупкого или недокументированного поведения
• Выявлять и устранять хардкод бизнес-правил, тихие сбои, неполные загрузки, дубликаты и другие повторяющиеся источники проблем качества данных
• Исправлять проблемы на подходящем архитектурном слое, а не патчами ниже по потоку
• Восстанавливать и дозаливать пропущенные или некорректные исторические данные и сверять результаты с исходными системами
• Улучшать маппинги мастер-данных (клиенты, каналы, продукты), где несогласованная логика влияет на отчётность
• Заменять хрупкие ручные процессы на управляемые, запланированные и мониторируемые пайплайны
• Строить автоматическую сверку, проверки здоровья фидов и алертинг для быстрого обнаружения сбоев данных
• Улучшать управление зависимостями, процессы перезагрузки и контроль изменений
• Документировать критичную линейность данных, зависимости систем, логику трансформаций и зоны ответственности
• Работать с внутренним IT, Finance, рыночными командами, внешними партнёрами по разработке и вендорами
• Понятно доносить технические выводы до технических и нетехнических стейкхолдеров

Требования

• 7+ лет практического опыта в data engineering, database engineering или смежных областях в продакшн-среде
• Глубокий опыт с Microsoft SQL Server и T-SQL: сложные запросы, представления, хранимые процедуры, запланированные джобы, продакшн-траблшутинг
• Сильное понимание ETL/ELT-пайплайнов, системных интеграций, зависимостей баз данных и архитектуры хранилищ данных
• Подтверждённый опыт диагностики и устранения инцидентов целостности и качества данных, а не только построения новых пайплайнов
• Способность самостоятельно разобраться в неоднозначной проблеме и определить, где, когда и почему она возникла
• Опыт прослеживания данных между несколькими системами и определения источника истины
• Сильные аналитические и «форензик» навыки решения проблем
• Здравый практический смысл: понимание, когда что-то технически работает, но не имеет смысла с бизнес-точки зрения
• Умение безопасно вносить изменения в общие продакшн-среды и понимать влияние на downstream
• Способность работать самостоятельно при ограниченном руководстве и доводить задачи до конца через несколько команд
• Чёткие навыки письменной и устной коммуникации
• Nice to have: опыт с BigQuery или другим современным облачным хранилищем данных
• Nice to have: опыт с SSIS, SQL Agent или аналогичными технологиями планирования/оркестрации
• Nice to have: опыт работы с данными ERP (JD Edwards, Microsoft Dynamics NAV, Business Central)
• Nice to have: знакомство с commerce-платформами (Shopify, данные Amazon marketplace)
• Nice to have: опыт с финансовыми или коммерческими датасетами (инвойсы, транзакции, продажи, возвраты, налоги, начисления, general ledger)
• Nice to have: опыт сверки данных между операционными системами, финансовыми системами, хранилищами и BI-инструментами
• Nice to have: опыт с data observability, автоматической сверкой, мониторингом качества данных
• Nice to have: опыт с legacy-системами, offshore-командами, внешними вендорами

Условия

• 6-месячный контракт / срочный трудовой договор, полная занятость
• Компенсация $70K–$80K за шесть месяцев
• Локация: Carson, CA (гибрид) или удалённо с сильным пересечением по Pacific Time
• Команда: Global Data & AI
• Dermalogica — равноправный работодатель, поддерживающий инклюзивную культуру

Навыки

• Microsoft SQL Server
• T-SQL
• ETL
• ELT
• Data Warehouse
• BigQuery
• SSIS
• SQL Agent
• JD Edwards
• Microsoft Dynamics NAV
• Business Central
• Shopify
• Amazon marketplace
• Data Quality
• Data Observability
• Reconciliation
• Data Lineage
• ERP