Arlo Technologies

Sr. Data Engineer

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Senior Staff Data Engineer в Arlo для проектирования и масштабирования data-платформы на Databricks. Отвечает за архитектуру данных, пайплайны и data governance, задаёт инженерные стандарты и работает с продуктовыми, аналитическими и data science командами.

Задачи

  • Определять и развивать архитектуру данных на Databricks Lakehouse с использованием medallion-паттернов (Bronze/Silver/Gold) для batch и streaming нагрузок
  • Проектировать, строить и поддерживать масштабируемые ETL/ELT пайплайны на Python, PySpark и SQL
  • Внедрять и управлять Unity Catalog: каталоги, схемы, контроль доступа, lineage, аудит и безопасный обмен данными
  • Определять и обеспечивать практики data governance: качество данных, управление метаданными, классификация, хранение, приватность и соответствие требованиям
  • Строить и поддерживать CI/CD пайплайны для data-воркфлоу (Git, GitHub Actions/Azure DevOps/Jenkins, Databricks Asset Bundles), включая автотесты и деплой
  • Внедрять проверки качества данных, мониторинг и алертинг
  • Мониторить и оптимизировать Databricks-джобы по производительности, надёжности и стоимости
  • Менторить инженеров, вести design review и вносить вклад в data roadmap

Требования

  • 5–6 лет опыта в data engineering, построение production data-пайплайнов и архитектур
  • Сильный практический опыт с Databricks (Spark, Delta Lake, Workflows)
  • Практический опыт с Unity Catalog (контроль доступа, lineage, проектирование каталогов и схем)
  • Понимание концепций data governance: качество данных, каталогизация, lineage, приватность и комплаенс (GDPR, CCPA)
  • Продвинутые навыки Python (PySpark) и SQL
  • Опыт с CI/CD и практиками DataOps
  • Опыт data-моделирования и работы с крупной облачной платформой (AWS, Azure или GCP)
  • Сильные коммуникативные навыки и умение работать кросс-функционально
  • Степень бакалавра в Computer Science, Engineering или смежной области

Условия

  • Зарплата $140,000–160,000 в год
  • Возможны бонусы, equity и полный пакет льгот
  • Равные возможности трудоустройства и инклюзивная среда
  • Разумные accommodations для соискателей с инвалидностью

Навыки

  • Databricks
  • Spark
  • Delta Lake
  • Unity Catalog
  • Python
  • PySpark
  • SQL
  • ETL
  • ELT
  • Data governance
  • CI/CD
  • Git
  • GitHub Actions
  • Azure DevOps
  • Jenkins
  • Databricks Asset Bundles
  • AWS
  • Azure
  • GCP
  • Data modelling
  • DataOps

Похожие вакансии

Principal Data Engineer
Navy Federal Credit UnionLeadViennaГибрид
151,600 – 208,500 USD в год
20 нояб.
Principal Data Engineer
Strider TechnologiesLeadTysonsОфис
20 нояб.
Sr. Data Engineer
Lam Research CorporationSeniorГибрид
114,000 – 253,000 USD в год
21 нояб.
Senior Data Engineer
Western National Insurance GroupSeniorEdinaОфис
104,300 – 143,440 USD в год
21 нояб.
AWS Data Engineer
IncedoSeniorОфис
20 нояб.
Data Engineer
Seattle Children'sMiddleSeattleГибрид
110,122 – 165,182 USD в год
20 нояб.
Senior Data Platform Engineer , Vice President
Mitsubishi UFJ Financial GroupLeadJersey CityГибрид
140,000 – 194,000 USD в год
20 нояб.
Data Platform Engineer
Booz Allen HamiltonSeniorWarner RobinsОфис
77,500 – 176,000 USD в год
20 нояб.
Data Platform Engineer
VastianMiddleУдалённо
21 нояб.
Databricks Platform & Data Engineer
NTT DATA Global Services CorporationSeniorPlanoОфис
20 нояб.