Staff Software Engineer, RL Environments

Автоматический пересказ вакансии на русском. Полный текст на языке оригинала и форма отклика — на сайте работодателя.

Инженер в Scale AI для построения и масштабирования RL-сред: платформа песочницы, оркестрация rollout'ов, верификаторы и reward-сигналы для обучения фронтирных моделей.

Задачи

• Проектировать платформу RL-сред: sandboxed execution, упаковка и версионирование окружений, оркестрация rollout'ов, захват траекторий, фреймворки верификаторов
• Создавать authoring-инструменты, позволяющие инженерам и экспертам производить окружения без переизобретения инфраструктуры
• Инструментировать реальные приложения и проектировать наборы задач, выявляющие конкретные пробелы в возможностях моделей
• Строить грейдеры, устойчивые к адверсариальной оптимизации
• Задавать техническое направление для нескольких команд и лично писать сложные части системы

Требования

• 8+ лет опыта в software engineering с сильными основами в распределённых системах, системном дизайне, структурах данных и алгоритмах
• Сильные навыки Python и опыт поставки production-софта; уверенность ещё в одной части стека (TypeScript/React, Go, Rust или аналогичное)
• Глубокий опыт с контейнеризацией и sandboxed execution: Docker, VM, gVisor/Firecracker, Kubernetes или эквиваленты
• Опыт построения или эксплуатации высоконагруженных backend-систем: оркестрация, планирование задач, очереди, крупномасштабные data pipelines
• Практический опыт работы с LLM: agent loops, tool calling, MCP, eval harnesses
• Способность самостоятельно вести неопределённые задачи до поставленной системы
• Отличные письменные и устные коммуникации, умение выравнивать инженеров, исследователей и нетехнических партнёров

Условия

• Базовая зарплата, equity и бенефиты
• Медицинская, стоматологическая и офтальмологическая страховка, пенсионные бенефиты
• Стипендия на обучение и развитие, щедрый PTO
• Возможен commuter stipend
• Диапазон базовой зарплаты для San Francisco, New York, Seattle: $252,000—$315,000 USD

Навыки

• Python
• TypeScript
• React
• Go
• Rust
• Docker
• Kubernetes
• gVisor
• Firecracker
• LLM
• MCP
• RLHF
• RLAIF
• RLVR
• GRPO
• PPO
• Ray
• vLLM
• SGLang
• AWS
• GCP
• Azure
• CI/CD
• Infrastructure as Code