Staff Software Engineer, Data Warehouse

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Инженер уровня Staff в команду платформы данных Commure. Отвечает за data warehouse end-to-end: CDC-пайплайны, data lake, слой запросов и трансформаций, аналитический инструментарий.

Задачи

• Владеть платформой data warehouse end-to-end: CDC-пайплайны, data lake, слой запросов, слой трансформаций и аналитический инструментарий
• Проектировать и эксплуатировать CDC-пайплайны на Debezium (Kafka, Redpanda или аналог) с низкой задержкой и высокой точностью переноса данных из операционных БД в хранилище
• Проектировать data lake на объектном хранилище с открытым табличным форматом (Iceberg, Delta Lake или Hudi) и Parquet для batch- и streaming-нагрузок с разделением хранения и вычислений
• Эксплуатировать и масштабировать StarRocks (или смежные MPP/lakehouse-движки) как слой запросов и serving: схема, materialized views, паттерны ingestion, тюнинг, баланс стоимости и производительности
• Строить слой трансформаций на dbt: стандарты моделирования, тесты, документация и семантический слой как единый источник правды по метрикам
• Настраивать оркестрацию (Airflow, Dagster или аналог), CI/CD, observability и инструменты контроля качества данных
• Совместно с Security и Compliance обеспечивать работу с PHI/PII, контроль доступа, lineage и аудит в соответствии с HIPAA и SOC 2
• Задавать паттерны и конвенции: схемные контракты, паттерны ingestion и self-serve инструменты для продуктовых и аналитических команд

Требования

• 6+ лет опыта в software engineering, значительная часть — построение или эксплуатация платформ данных на масштабе
• Опыт работы с современным data stack: CDC (Debezium или аналог), streaming (Kafka, Redpanda), форматы data lake (Iceberg, Delta, Hudi), MPP или lakehouse движок (StarRocks, ClickHouse, Trino, Snowflake, Databricks), dbt
• Свободное владение SQL, проектированием схем, оптимизацией запросов и оценкой trade-off стоимости и задержки на больших данных
• Опыт эксплуатации production data infrastructure: оркестрация, observability, on-call, качество данных и incident response

Условия

• Работа в команде, которая взаимодействует с клиницистами напрямую, без лишних слоёв процессов
• Быстрый темп, ежедневные деплои и полная ответственность от идеи до продакшена
• Платформа обслуживает 500 000+ клиницистов в 500+ организациях, $25B+ ежегодных claims и 200+ млн взаимодействий с пациентами
• Компания привлекла $70M при оценке $7B, входит в Fortune Future 50 и получила 2026 AI Breakthrough Awards

Навыки

• Debezium
• StarRocks
• dbt
• Kafka
• Redpanda
• Iceberg
• Delta Lake
• Hudi
• Parquet
• SQL
• Airflow
• Dagster
• CI/CD
• HIPAA
• SOC 2
• AWS
• GCP
• Azure
• Terraform
• Pulumi
• Kubernetes
• ClickHouse
• Trino
• Snowflake
• Databricks
• Cube
• DataHub
• OpenMetadata
• Amundsen