Senior Data Engineer

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Senior Data Engineer для enterprise-клиента в life sciences: проектирование и развитие масштабных data-платформ и пайплайнов на стыке научной/клинической информатики и данных производственных процессов. Гибридный формат с 3 днями в офисе в Индианаполисе.

Задачи

• Проектировать, строить и поддерживать production-grade data-пайплайны и архитектуру для научных, клинических и research-данных (small/large molecule, genomics, proteomics, LIMS)
• Структурировать сложные мультимодальные клинические и научные датасеты для аналитики, отчётности и downstream ML-моделей
• Интегрировать и моделировать данные OT и производственных процессов: API manufacturing, batch processing, MES, SCADA, OSIsoft PI
• Объединять разрозненные лабораторные и производственные пайплайны в централизованные отказоустойчивые enterprise data-платформы
• Строить ETL/ELT-пайплайны на Databricks, Snowflake, AWS/Azure с использованием PySpark и SQL
• Обеспечивать соответствие пайплайнов требованиям governance, data residency и GxP
• Работать напрямую с process-инженерами, химиками и руководителями research informatics, переводя операционные задачи в технические спецификации
• Внедрять инженерные best practices, стандарты моделирования данных и мониторинг пайплайнов

Требования

• Senior-уровень (10–20+ лет) в разработке ПО, архитектуре data-платформ и сложном ETL/ELT
• Продвинутый Python, PySpark и экспертный SQL
• Практический опыт с Databricks, Snowflake или enterprise data-экосистемами AWS/Azure
• Опыт с Airflow, dbt, Spark и enterprise-оркестраторами данных
• Опыт построения streaming и batch-архитектур через REST API, message brokers и интеграции с БД
• Глубокий опыт в scientific/clinical informatics (CDISC/SDTM, LIMS, clinical trials, multi-omics) ИЛИ в данных химического/процессного инжиниринга (API manufacturing, batch data, SCADA, MES, OSIsoft PI)
• Способность работать в нестандартных узкоспециализированных доменах
• Разрешение на работу в США без спонсорства и возможность работать 3 дня в неделю в офисе в районе Индианаполиса
• Сильные навыки решения проблем и коммуникации со кросс-функциональными командами

Условия

• Контракт full-time / enterprise project engagement через Xenon7
• Гибридный формат: 3 дня в неделю в офисе у клиента в Индианаполисе
• Рассматриваются региональные кандидаты и кандидаты в EST с готовностью к поездкам в офис
• Спонсорство рабочей визы не предоставляется

Навыки

• Python
• PySpark
• SQL
• Databricks
• Snowflake
• AWS
• Azure
• Airflow
• dbt
• Spark
• REST API
• MES
• SCADA
• OSIsoft PI
• LIMS
• CDISC
• SDTM
• GxP