Crusoe
Senior Software Engineer, Crusoe Managed Data Transfer
Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.
Senior-инженер в новую команду Managed Data Transfer (MDT) в Crusoe. Задача — построить control plane сервиса переноса данных петабайтного масштаба из AWS S3 в хранилище Crusoe: API заданий, планировщик и состояние джобов.
Задачи
- Проектировать и разрабатывать API переноса данных (create, list, get, cancel) с провайдеро-нейтральной моделью источников и назначений
- Строить планировщик и state machine: разбиение листинга бакета на единицы работы, размещение по региональным пулам воркеров, отслеживание прогресса, ретраев и возобновления после сбоев
- Обеспечивать корректность на петабайтном масштабе: безопасные ретраи и отмена, end-to-end проверка контрольных сумм, понятные ошибки при неверных правах или назначении
- Реализовывать безопасный доступ к бакетам клиентов через короткоживущие least-privilege креды (сначала AWS role assumption), интеграция с Crusoe IAM и аудит-логированием
- Выпускать CLI, а совместно с партнёрскими командами — Terraform и Console для создания и мониторинга переносов
- Инструментировать сервис метриками, логами и алертами, писать runbooks и участвовать в on-call ротации
- Согласовывать интерфейсы с командами Storage, Network, IAM и Console, работать с Product и Solutions Architects по онбордингу ранних клиентов
Требования
- Опыт проектирования и выпуска production backend-сервисов и API, желательно на Go, с gRPC или REST, реляционными БД и Kubernetes
- 5+ лет разработки облачной инфраструктуры или платформенных сервисов, включая вывод сервиса от нуля до general availability
- Понимание распределённых систем: идемпотентность, ретраи с backoff, leases, checkpointing, частичные отказы
- Умение проектировать публичные API, под которые клиенты пишут автоматизацию и которые развиваются без breaking changes
- Знание аутентификации, авторизации и least privilege, аккуратность в обращении с кредами клиентов
- Опыт эксплуатации сервисов в production, on-call, построения дашбордов и алертов
- Умение работать кросс-командно и оформлять решения в design docs
- Степень бакалавра в Computer Science, Engineering или смежной области либо эквивалентный опыт
Условия
- Конкурентная компенсация и пакеты акций
- Restricted Stock Units
- Оплачиваемые отпуска, праздники и программы leave of absence
- Медицинская, стоматологическая и vision-страховка
- Взносы работодателя в HSA
- Оплачиваемый родительский отпуск
- Страхование жизни, краткосрочная и долгосрочная нетрудоспособность
- Профессиональное развитие и компенсация обучения
- Поддержка ментального здоровья и wellness
- Компенсация проезда (парковка и транспорт)
- Стипендия на мобильную связь
- 401(k) с match до 4% зарплаты
- Volunteer time off
- Глобальная тревел-страховка и экстренная помощь
- Ежедневная компенсация на питание
- Дополнительные льготы в зависимости от локации
Навыки
- Go
- gRPC
- REST
- Kubernetes
- AWS S3
- AWS IAM
- AWS STS
- Terraform
- CLI
- реляционные базы данных
- распределённые системы
- object storage
- Temporal
- Argo
- Kubernetes operators