Software Engineer, Data Platform

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Инженер в команду Data Infrastructure платформы для бухгалтерии и финансов. Строит lakehouse, который забирает сырые данные из ERP, банков и платёжных систем, приводит их к типизированным каноническим таблицам и отдаёт в отчётность и AI-агентов.

Задачи

• Инкрементальный забор данных по watermark из API-источников (NetSuite, Stripe, Brex, Ramp, HubSpot), файловых S3-инбоксов и репликация Postgres → ClickHouse
• Внедрение data contracts и типизации исходных данных: схемы на границе, отказ от сырого JSON у потребителей, каталогизация датасетов
• Управление схемой lakehouse через единый pipeline declare → codegen → apply с согласованным применением по тенантам
• Обеспечение безопасности данных: scoping запросов, ACL, защита доверия клиентов
• Батчевая обработка и event-driven учёт: развязка обработки событий и сбоев downstream, прозрачность «что запустилось, что упало и почему»
• Контроль корректности и наблюдаемость данных: проверки полноты, health ингеста, двухфазный re-ingest, трассировка от записей леджера к сырым событиям
• Масштабирование отчётности: паттерны запросов и материализации от P&L уровня совета директоров до отдельной транзакции

Требования

• 3+ года опыта software engineering, значительная часть — на data-intensive системах
• Сильный SQL и понимание колоночных хранилищ, партиционирования и производительности запросов
• Опыт с современным стеком трансформации/оркестрации (SQLMesh, dbt, Dagster, Airflow или аналоги)
• Сильное владение языком общего назначения (основной стек — TypeScript, с примесью Python)
• Опыт построения и эксплуатации data pipelines / lakehouse / warehouse в продакшене, понимание ETL, идемпотентности, watermark и backfill
• Аудируемость и принцип «fail early, fail explicitly» как проектные ограничения
• Комфорт по всему стеку: TypeScript-сервисы, SQL (ClickHouse и Postgres), инструменты трансформации

Условия

• Работа в офисе в Сан-Франциско
• Высокий темп и высокая автономия, большие мандаты и высокое доверие к инженерам
• Культура, ориентированная на лучших IC: Own the Outcome, Brick by Brick, Love the Game, Earn the right, SALY
• Продукт с сильным product-market fit и клиентами Anthropic, Brex, OpenAI, Plaid, Wealthfront
• Инвесторы: IVP, Menlo Ventures, Founders Fund, 8VC

Навыки

• TypeScript
• Node.js
• Python
• SQL
• Postgres
• ClickHouse
• ClickPipes
• SQLMesh
• dbt
• Dagster
• Airflow
• S3
• Athena
• Iceberg
• Inngest
• Temporal
• AWS
• ETL
• Lakehouse
• Data pipelines